docetl
DocETL, büyük miktarda yapılandırılmış ve yapılandırılmamış veriyi dil modelleri yardımıyla işlemek için geliştirilmiş bildirimsel ve ajan tabanlı bir haritala-indirge sistemidir. Doğal dille yazılan işlemleri koordine ederek verileri paralel işler ve boru hattını otomatik olarak optimize eder. Doğruluğu artırmak ve maliyeti düşürmek amacıyla model değişimi, istem yeniden yazımı ve görev ayrıştırma gibi optimizasyonlar uygular.
ucbepic · Veri Hattı & ETL
Bu kategorideki yaygın ticari ürünler: Fivetran, Informatica, Stitch
- Doğal dil ifadeleriyle map, reduce ve filter gibi işlemler tanımlayarak büyük veri setlerini işlersin.
- Python API veya YAML yapılandırma dosyaları kullanarak veri işleme boru hatları oluşturursun.
- DocWrangler arayüzü üzerinden istemleri görsel olarak düzenleyip sonuçları gerçek zamanlı gözlemlersin.
- ↑ OlumluGitHub Issue
OCR Yetenekleri ile PDF Girişi için Destek Ekle
“Objective Extended DocETL, PDF dosyalarını girdi olarak desteklemek için, PDF'ler içinde taranan belgeler veya resimler için OCR kullanarak metin çıkarma yeteneği de dahil olmak üzere. Şu anda DocETL, JSON gibi yapılandırılmış veri formatlarını desteklemektedir. OCR ile PDF desteği eklemek büyük ölçüde bizim...”
- ↑ OlumluGitHub Issue
Diğer LLM sağlayıcıları için esnek destek ekleyin
“Öncelikle, bu projeyi paylaştığınız için çok teşekkür ederiz! Bu bizim (Groningen Üniversitesi, Bilgi Teknolojileri Merkezi) içsel olarak yüzdüğümüz bir fikrin çok daha iyi bir şekilde uygulanmasıdır. Şu anda araştırma personelimiz için VLLM aracılığıyla modellere hizmet veriyoruz ve bu harika bir araç olacaktır...”
Notum
Alternatif sayfaları
Aynı kategoride: Veri Hattı & ETL
- Apache Spark★ 44.376 · bugün
- Apache Flink★ 26.441 · bugün
- rocketride-server★ 19.018 · bugün
- Luigi★ 18.780 · 17 gün önce
- OpenMetadata★ 15.637 · bugün
- cocoindex★ 11.788 · bugün