สอนใช้ Apache Airflow ใน 10 นาที การทำ Data Pipeline จะไม่ยากอีกต่อไป
“Data pipeline คืออะไร? คนทำงานสาย data engineer ทำไมต้องรู้จัก? ในคลิปวีดีโอนี้ เราจะมาดูวิธีการสร้าง Data Pipeline แบบง่ายๆ โดยใช้ Airflow เพื่อดึงข้อมูล COVID-19 ในแต่ละวันมาเก็บในฐานข้อมูลของเราเอง
รู้หรือไม่! Apache Airflow ถูกพัฒนาโดย Airbnb ตั้งแต่ปี 2014 ให้เป็น Platform ที่เราสามารถเขียนโค้ดเพื่อ Author ตัว Workflow (หรือ Pipeline) ของเรา และยังสามารถ Schedule และ Monitor ได้อีกด้วย
📌 สามารถไปส่องโค้ดได้ที่ https://github.com/dataength/automating-your-data-pipeline-with-apache-airflow/tree/master/covid-19
และถ้าคุณคือ Data Engineer, Data Scientist หรือ Software Developer ที่สนใจทำงานสาย Data และอยากเรียนรู้การทำ Data Pipelines ตอนนี้ทาง Skooldio มีคอร์ส Data Pipelines with Airflow ที่จะสอนให้คุณเริ่มจัดการข้อมูลกับ Big Data ได้โดยไม่ต้องกังวล กับคุณกานต์ อุ่ยวิรัช ได้แล้ววันนี้ที่ 👉 https://to.skooldio.com/TGJp8Egphtb