Live - Data Engineering 101 with Mils

มาเรียน data engineering concepts สำหรับผู้เริ่มต้นกับน้องมิวกันนะคร้าบ เย้
#DataRockie #Mils

[@isarapap19]

เรียนครั๊บบบ ^^

[@MegaTheNone]

ทำไมไม่ทำให้เป็น serverless ให้หมด ทำไมต้องไป จมอยู้กับ kube เล่นกับ event driven ได้ เยอะกว่ามาก และประหยับกว่ามาก

[@lattaponyodsuwan7427]

- เพราะ serverless ราคาถูกกว่ามันไม่เป็นจริงเสมอครับ ขึ้นอยู่กับปริมาณข้อมูลที่วิ่งผ่านระบบอีกทีนึง
- ใช้ kube ก็สามารถ optimize cost ผ่านทางอื่นได้ เช่น capacity reservation
- event driven ทำที่ไหนก็ได้ครับ เพียงแต่ใน serverless ที่ส่วนมากสำเร็จรูปมาจาก cloud provider จะเชื่อมต่อกับบริการต่างๆ ของ provider นั้นๆ ได้ง่ายกว่า
- หลายๆ ครั้งเราอยากได้ architect ที่เป็น cloud agnostic, kube เลยเป็นตัวเลือกตัวนึงที่ดี

[@ta3113ta]

ตอนแรกบริษัทผมหลายๆ services ใช้ serverless แต่ว่าตอนนี้ต้องย้ายไป kube ทั้งหมด เหตุผลหลักๆสองข้อคือ
- DX ไม่ดีเท่าไรครับ run บน local ก็ลำบาก
- อันนี้เหตุผลหลักเลยคือ vendor lock ครับ วันดีคืนดี vendor จะทำอะไรกับเราบ้างก็ไม่รู้ อย่าง AWS ล่าสุดคือหยุด suppor go1.x runtime ที่นี้ก็ว้าวุ่นเลย

[@DataRockie]

@@lattaponyodsuwan7427 สุดยอด ขอบคุณคร้าบ

[@DataRockie]

คิดว่า solution ที่ใช้ไม่มีอะไร one size fits all เลยครับ ในชีวิตเราก็เช่นกัน : )

[@manytechlive]

เมื่อเราทำเป็นอาจจะต้องมีไป Certificate ไว้ว่า เรารู้นะ แต่เก่งไม่เก่งนั้นก็เข้ามาคุ้ยกันต่อ

[@chaiyootkmitnb]