Dagster

Dagster, veri varlıklarını geliştirmek ve yönetmek için tasarlanmış bulut tabanlı bir veri hattı orkestratörüdür. Python fonksiyonları olarak tanımlanan veri varlıklarının doğru zamanda çalıştırılmasını sağlar ve tüm geliştirme yaşam döngüsü boyunca entegre soy kütüğü ile gözlenebilirlik sunar. Yerel geliştirmeden birim testlerine ve üretime kadar tüm aşamalarda merkezi bir kontrol düzlemi olarak görev yapar.

DA

dagster-io · İş Akışı & Otomasyon

YILDIZ16.4K
ÇATAL2.4K
COMMIT27.7K
KATKICI680
SÜRÜMv0.2.8.post0
GÜNCELLEMEbugün
PythonData OrchestrationAssetsApache-2.0

Bu kategorideki yaygın ticari ürünler: Zapier, Make, Microsoft Power Automate

Ne yapar?
  • Python fonksiyonlarını kullanarak inşa etmek istediğin veri varlıklarını tanımlarsın.
  • Entegre gözlenebilirlik ve soy kütüğü özellikleri ile meta verilerini merkezi olarak izlersin.
  • Popüler veri araçlarıyla entegrasyon sağlayarak boru hatlarını üretime alırsın.
Dikkat
  • • Yüksek açık issue sayısı (2.602)
Kullanıcı yorumları
  • ↓ OlumsuzHacker News

    Yeni yerel veri yığını: Dagster, dbt ve DuckDB'yi entegre etmek

    “Hey Georg, yayınladığın için teşekkürler. Son zamanlarda neredeyse aynı yığınla bir şey inşa etmek için çalışıyorum ve Dagster entegrasyonu bir sonraki büyük adımım. Son birkaç haftada backend için Duck ve Clickhouse'u tekmeledim. Çok eğlenceliydi. Sonuçta ben...”

  • ↑ OlumluHacker News

    Yeni yerel veri yığını: Dagster, dbt ve DuckDB'yi entegre etmek

    “Kar tanesi yerel değil, bulut için ödeme yapmanız gerekiyor ... Airflow, Airflow, karmaşıklık, dik öğrenme eğrisi, daha az karmaşıklık ve k8s gibi yapmak isteyebileceğiniz modern şeylerle daha temiz entegrasyon ile Airflow'dan daha güçlü as/more olmaya çalışan bir endüstri var, ancak...”

Web Sitesi GitHub

Notum

Alternatif sayfaları

Aynı kategoride: İş Akışı & Otomasyon