ทำไมอาชีพ Data Engineer ถึงกำลังมาแรงในขณะนี้?
March 23, 2020
อาชีพ Data Engineer ตอนนี้ถือเป็นอาชีพที่กำลังมาแรงมาก เนื่องจากตอนนี้องค์กรต่าง ๆ เริ่มเข้าใจเห็นภาพของการใช้ Data ในองค์กรมากขึ้น
อาชีพ Data Engineer ตอนนี้ถือเป็นอาชีพที่กำลังมาแรงมาก เนื่องจากตอนนี้องค์กรต่าง ๆ เริ่มเข้าใจเห็นภาพของการใช้ Data ในองค์กรมากขึ้น
สำหรับ Live รอบนี้ แอดชวนน้องฝน Senior Machine Learning Engineer จาก Sertis มาคุยกันด้วยครับ น้องฝนอยู่เบื้องหลัง Data Engineer ของบริษัทใหญ่ ๆ ในไทยหลายแห่งเลยครับ
สรุปเนื้อหาคอร์สสอนพื้นฐานด้าน Data Engineering ตั้งแต่ฐานช้อมูล (Database), การทำ ETL (Extract Transform Load) ไปจนถึงการใช้ Airflow ทำ Data Pipeline
คนมักเข้าใจว่า การจะเป็น Data Scientist ต้องเก่งทั้ง Hacking (การเขียนโปรแกรม), Maths & Statistics (คณิตศาสตร์), และ Substantive (ด้านธุรกิจ)
วันนี้จะมาเล่าถึงสายอาชีพ Data Engineer ที่ทุกบริษัทด้าน Data ต้องมี แต่คนไม่ค่อยรู้จักกัน พวกเขาเป็นเบื้องหลังของระบบ Data Platform ที่ทุกองค์กรต้องใช้
ใน 1 ปีที่ผ่านมา แอดโชคดีที่มีโอกาสได้ทำหลายอย่างมาก ๆ ทั้งด้าน Data Science, Data Engineer, Data Visualization ในบริษัทใหญ่ ๆ ในตลาดหุ้นออสเตรเลีย
วันนี้จะมาสรุป Conceptให้ฟังกัน เป็นการสร้าง Data Pipeline สำหรับระบบ Data Science แบบ End-to-End ก็คือ ตั้งแต่เริ่มเก็บข้อมูล ไปจนถึงนำข้อมูลไปทำ Analytics
สายงาน Machine Learning Engineer เหมาะกับคนที่จบด้าน Software Engineer มา หรือใครเป็น Software Engineer อยู่ แล้วสนใจศึกษาด้าน Machine Learning เพิ่มขึ้นก็เหมาะครับ ที่สำคัญคือทักษะการเขียนโปรแกรม, Algorithms & Data Structure ต้องได้
Data Scientist ต่างกับ Data Engineer อย่างไร และทำไม Data Engineer ถึงมีความจำเป็นในองค์กรมากกว่า