Dagster: data orchestrator for machine learning, analytics, and ETL

Overview

Dagster คือ เครื่องมือสำหรับจัดการ/ประสานงานข้อมูล สำหรับ machine learning, analytics,และ ETL

ในแต่ละ Sections จะประกอบไปด้วย

• Overview: คำอธิบายของ concept
• Relevant APIs: Index ของ top-level Dagster APIs ที่เกี่ยวข้องกับ concept.
• Examples: Easy-to-copy code snippets for the concept.
• Patterns: A list of advanced patterns to use and anti-patterns to avoid with the concept.

Main Concepts Sections

• Solids and Pipelines
• Modes and Resources
• Testing
• Configuration System
• Dagster Types
• IO Management
• Dagit & GraphQL API
• Repositories and Workspaces
• Schedules, Sensors, and Partitions
• Assets
• Logging

** เนื้อหาทั้งหมดมาจาก https://docs.dagster.io/ เขียนไว้เพื่อทำความเข้าใจ เนื้อหาบางจุดใช้ google translate แปล ดังนั้นถ้าอ่านแล้วไม่เข้าใจให้ไปอ่านที่ docs ของ dagster จะดีที่สุด **