Data Engineer คืออะไร อาชีพนี้คือใคร ทำอะไร ต้องเรียนอะไรบ้าง | DataTH Live
ฝัง
- เผยแพร่เมื่อ 24 ม.ค. 2020
- Download Slide: blog.datath.com/live-1-data-e...
สำหรับ Live รอบนี้ แอดชวนน้องฝน Senior Machine Learning Engineer จาก Sertis มาคุยกันด้วยครับ น้องฝนอยู่เบื้องหลัง Data Engineer ของบริษัทใหญ่ ๆ ในไทยหลายแห่งเลยครับ
นอกจากนั้น ล่าสุดน้องฝนเพิ่งคว้า Certificate ใบที่ 5 ของ Google Cloud Platform มาครับ เป็นคนไทยที่ได้รับ Certificate จาก Google Cloud มากที่สุดในขณะนี้
หัวข้อที่เราจะคุยกัน รวบรวมมาจากคำถามที่เพื่อน ๆ ถามกันมาโพสที่แล้วครับ:
✅ เรื่อง data engineer อาชีพที่มาแรงกว่า data scientist
✅ ทำไม data engineer ถึงสำคัญ
✅ อยากเป็น data engineer ต้องรู้อะไรบ้าง
ติดตามอ่านบทความใหม่ ๆ ได้ที่: blog.datath.com/
ไม่พลาดอัพเดทใหม่ ๆ บน Facebook Page ของเรา: datasciencechill - วิทยาศาสตร์และเทคโนโลยี
![[UNCUT]"เศรษฐา" โดนบีบให้ลาออก เผยดีลลับ "ทักษิณ" ต้องต่อโปร ไม่งั้นเจอจุดจบ! I คนดังนั่งเคลียร์](http://i.ytimg.com/vi/XlH3k81dxmE/mqdefault.jpg)
เท่าที่ฟังมาสรุปว่า data engineer เป็นฝ่ายเตรียมข้อมูล และเขียนโค้ดเพื่อวางระบบให้ฝ่ายอื่นๆนำข้อมูลไปใช้ได้สะดวก ส่วน data scientist คือคนที่นำข้อมูลที่ data engineer เตรียมมาใช้ เพื่อทำให้ได้อะไรสักอย่างนำไปใช้กับลูกค้า 😂
ใช่แล้วคร้าบ >
ถ้าเป็นproject engineer management มาอยากข้ามสายงานไป data อันนี้ต้องไปเรียนเอาปริญญามาเพิ่มไหมคะ
พี่ครับจบสายอาชีพปวสสาขาเทคโนโลคอมจะทำงานdata engineerได้ไหมครับ
พอมานั่งฟัง อ่าว นี่เราก้าวขาไปครึ่งนึงแล้วนี่หน่า สมัยนึงเคยทำงาน ตอนนั้นสนุกมาก เป็นคนจัดการทำเกี่ยวกับข้อมูล behavior ของลูกค้าทั้งหมด ไม่ว่าจะจาก gtm, hotjar, luckyorange หรืออื่นๆ ไปลงที่ ga ตามเงื่อนไขที่ ux/ui จะกำหนดมา แล้วให้ data analyst เขามาใช้ต่อเอาเอง ซึ่งเขาก็น่าจะเคลียๆข้อมูลเอง เราไม่ได้เข้าไปดูตรงส่วนนั้น สงสัยต้องไปศึกษาเรื่องการจัดการข้อมูล พวก ETL เพิ่ม และภาษาอื่นที่เกี่ยวข้องเพิ่ม เพื่อเตรียมตัวพุ่งไปสายงานนั้นแบบเต็มตัว 🤣
ตอนนี้เป็น Dev อยู่อยากย้ายไปทำ data en มาครับ อายุ 26 แล้ว ปสก. ด้านนี้ไม่มีเลย ไม่รู้จะเริ่มยังไงดี
ถ้าเขียนโปรแกรมเป็นอยู่แล้ว ย้ายมาไม่ยากเลยคร้าบ ไม่แน่ใจว่าตอนนี้ dev ด้านไหนนะครับ
แนะนำให้ศึกษาเรื่อง database, data warehouse, linux เพิ่มขึ้นครับ และหัดเขียน Python ครับ :)
ถ้าตั้งใจจริง อยากเชิญมาเรียนด้วยกันที่ bit.ly/road2de เลยครับ เรามีสอนครบทุกสกิลที่ต้องใช้ของการย้ายสายงานมา data engineer เลยครับ
รบกวนถามหน่อยนะคะ พอดี อยากเรียนทางด้านนี้ data scientist แต่ไม่รู้จะเรียน คณะอะไร หรือเราต้องเรียนเสริมเอาเอง มันมีคณะ ที่เรียนเกี่ยวกับด้านนี้ไหมค่ะ ? ช่วยบอกหน่อยนะคะ 😅
สนใจด้าน data engineer หรือ data science นะคร้าบ ถ้าปัจจุบันปริญญาโทมีหลายโปรแกรมมากคร้าบ ลองดูที่ blog.datath.com/%e0%b8%9b%e0%b8%a3%e0%b8%b4%e0%b8%8d%e0%b8%8d%e0%b8%b2%e0%b9%82%e0%b8%97-data-science/
อยากสอบถามหน่อยครับ ถ้าเด็ก วิทยาการคอมพิวเตอร์ จบใหม่แล้ว สนใจงานด้าน data engineer สามารถเริ่มทำงานสายนี้ได้เลยไหมครับ หรือควรจะ เริ่มจากตำแหน่งสายงานอื่นก่อนครับ หรือว่าแล้วแต่ที่แล้วแต่บริษัทครับพี่
แล้วแต่ expectation ของบริษัทคร้าบ แต่ถ้าอยากให้ได้งานชัวร์ ๆ แนะนำให้ศึกษาคอนเซปต์ของ Data Engineer เพิ่มครับผม เช่น Data Pipeline, Data Warehouse คร้าบ แนะนำหนังสือ Designing Data-Intensive Application ครับ อธิบายดีมาก
(ส่วนนี้ ผมมีสอนในคอร์สของเพจครับ เผื่อสนใจ Inbox มาที่เพจ DataTH ได้ครับ)
@@datath โอเครครับขอบคุณครับบบ 😊
ผมเพิ่งเรียนจบสายวิทย์สุขภาพ อยากไปสาย Data science กับ Data engineer ครับ อยากทราบว่า 2 สายนี้เวลาเรียนรู้ทักษะงานสามารถเรียนไปพร้อมกันได้ไหมครับ?
ได้นะครับแต่ส่วนตัวคิดว่าค่อนข้างเหนื่อย เพราะ 2 สายนี้ค่อนข้างแตกต่างกันครับ
ถ้าอยากเรียนพวก data engineer คือต้องเรียนสายไหน คณะอะไรยังไงหรอครับ
อยากให้เน้นที่สกิลมากกว่าคร้าบ ลองดูสกิลที่ต้องใช้ได้ที่นี่ blog.datath.com/data-engineer-guide/
เพราะถ้าถามถึงปริญญา น่าจะยังไม่มีที่ตรงสายครับ (ใกล้เคียงที่สุดน่าจะเป็นด้านวิศวะคอม, วิทย์คอม แต่ก็ต้องเรียนรู้เพิ่มเติมครับ)
คุณเพิร์ธคะ
ได้งานตำแหน่งผู้ช่วย Data Engineer ควรเรียกเงินเดือนเท่าไหร่ถึงจะเหมาะสมคะ
ได้เท่าไหร่ครับ
สอบถามหน่อยครับ MIS นี่ถือว่าเป็น data engineer มั้ยครับพอดีกำลังจะไปฝึกงานสายนี้
ยินดีด้วยนะคร้าบ MIS เป็นชื่อที่มาก่อนคนจะเรียกว่า Data Science เลยครับ เพราะฉะนั้นจะอยู่ที่ตัวงานที่ทำมากกว่าครับ ถ้าทำ ETL, Data Pipeline ก็ถือว่าใช่ครับ
@@datath ขอบคุณมากครับ ช่องพี่มีคุณภาพมากช่วยสร้างเส้นทางอนาคตให้ผมเลยครับ
เขียน code ได้ ไปได้สายงานได้หมด
ขอคำแนะนำค่ะพอดีว่าสมัครงานอีกตำแหน่งหนึ่งไปแต่ทางบริษัท มีตำแหน่งนี้ว่างพอดีเลยดึงเเข้าไปทำ เป็นผู้ช่วยData Engineer ยอมรับว่าไม่รุ้อะไรเลยจริงๆค่ะ ต้องเริ่มจากตรงไหนก่อนคะ ไม่มีความรุ้ตรงนี้เลยค่ะ ขอคำแนะนำด้วยนะคะ
แนะนำให้ลองดูว่าขาดสกิลอะไรบ้างคร้าบ ตอนนี้อาจจะรู้บางอย่างอยู่แล้ว เราก็อัพสกิลส่วนที่ขาดได้เลยครับดูในบทความนี้ได้ว่าอาชีพนี้ต้องใช้สกิลอะไรบ้างครับ blog.datath.com/data-engineer-guide/
@@datath ขอบคุณมากไปค่ะ🙂
ถ้าอยากเริ่มจาก ป.ตรี มีคณะไหนบ้างคะ
ถ้าปริญญาตรี เคยคุยกับน้องที่เรียนอยู่ที่นี่คร้าบ น่าสนใจดี blog.datath.com/%e0%b8%9b%e0%b8%a3%e0%b8%b4%e0%b8%8d%e0%b8%8d%e0%b8%b2%e0%b8%95%e0%b8%a3%e0%b8%b5-data-science-kmitl/
@@datath เเล้วถ้าเรียนจบdata sciมาสามารถมาทำงานเป็น data engineerได้มั้ยคะ
@@chompool230 ได้คร้าบ แต่ต้องเรียนรู้เพิ่มเติมครับ
อยากลงเรียนกับพี่ สมัครlink ไหนหรอ
ขอบคุณคร้าบ ทักแชทมาที่เพจ fb.com/datasciencechill ได้เลยนะคร้าบ
มีคนเคยบอกว่าเป็นงาน routine จริงเท็จยังไงบ้างคะพี่
อันนี้น่าจะแล้วแต่คนครับ
คือ ถ้า Routine จริง เป็น pattern ซ้ำ ๆ เค้าก็ต้องสามารถทำ Automate ให้มันได้ครับ ซึ่งการทำ Automation เราก็ต้องเรียนรู้เทคโนโลยีใหม่ ๆ ทำให้มันไม่กลายเป็น Routine ไปครับ
แล้วยิ่งถ้าทำบน Cloud นี่ (แบบที่ผมทำอยู่) มีการอัพเดทแทบจะทุกสัปดาห์เลยครับ เพราะฉะนั้นเป็น Routine ยากมากกกก
13:50
สวัสดีครับ ผมอายุ 28 ปี เคยเป็นวิศกรในโรงงาน อยากทำด้าน data engineer มากครับ อายุเยอะแล้วยังเริ่มใหม่ทันไหมครับ TT
28 นี่สบายเลยครับ ยังเปลี่ยนทันสบาย ๆๆๆ
อายุ 28 เท่ากันเลย ทำ SAP DW กับ Powerbi กำลังอยากหาย้ายเลยครับ
เสียงน้องผู้หญิง เหมือน NailName#
เราสามารถลองฝึกทำจริงจากที่ไหนได้บ้างครับ
แนะนำให้เรียนพื้นฐานเพื่อให้มีความรู้ในเรื่องการดึงข้อมูล การทำความสะอาด และการจัดเก็บก่อนคร้าบ แล้วหลังจากนั้นค่อยไปหยิบไฟล์ข้อมูลมาลองทำโปรเจคดูครับ (ไฟล์ข้อมูลสามารถใช้จาก Kaggle, Reddit ได้ ผมแนะนำแหล่งโหลดไว้ที่นี่คร้าบ blog.datath.com/free-datasets-machine-learning/)
ขอยกตัวอย่างที่เราสอนในคอร์ส R2DE ของ DataTH ครับ เราเห็นในปัญหานี้ว่า DE เป็นสายที่ลองทำจริงได้ยาก (ถ้าไม่มีคน guide) เลยออกแบบคอร์สให้มี Workshop ในแต่ละบทให้ลองทำ ลองลงมือทำจริงไปด้วยกันเลยครับ ถ้าสนใจเชิญได้ที่ bit.ly/r2de2023
@@datath ขอบคุณครับ
กี๊ซ
กร๊าซ
ลักษณะงานคล้าย etl dev มากๆ
ETL Dev เป็นสายงานคล้าย ๆ กันครับผม เน้นที่งานส่วนหนึ่งของ DE ในส่วน ETL เป็นพิเศษครับ
เงินเดือน junior เริ่มที่เท่าไรครับ junior etl?
@@norpriest521 แล้วแต่บริษัทเลยคร้าบ o_ob