data flow

Microsoft Azure Data Factory เป็น บริการบน Cloud ที่จะช่วยในการรวบรวมจากแหล่งข้อมูลต่าง มีความสามารถในการปรับแต่ง ทำความสะอาดข้อมูล ซึ่งเป็นงาน ETL (Extract Transform Load) เพื่อนำข้อมูลไปใช้เพื่อนำไปใช้ต่อ เป็นงาน Data Engineer

Data Factory ช่วยให้คุณสามารถสร้างสรุป, จัดการ, และวางแผนการทำงานสำหรับข้อมูลขนาดใหญ่ คุณสามารถสร้างกระบวนการ ETL (Extract, Transform, Load) และผสานความสามารถของ Power Query และ Dataflow ในการทำงานได้อีกด้วย

ชุดกลไก ETL ผู้เขียนบรรยายไว้ในบทความชื่อ “กลไก ETL คืออะไร” และได้แนะนำ Microsoft SQL Server Integration Service (SSIS) ว่าเป็นแพลตฟอร์มสำหรับ ETL คุณภาพสูง เอาไว้ในบทความดังกล่าว แต่ยังมีเครื่องมือสำหรับ ETL อีกตัวหนึ่งชื่อ Power Query ได้รับความนิยมมากในขณะนี้ เพราะเป็นส่วนหนึ่งของ Power BI Desktop (หรือเป็น add-in ของ Microsoft Excel) เหมาะกับงานในลักษณะ Self-Service ETL และมีความซับซ้อนน้อยกว่า SSIS