BentoML

BentoML, yapay zeka uygulamaları ve model çıkarımı için optimize edilmiş çevrimiçi servis sistemleri kurmaya yarayan bir Python kütüphanesidir. Herhangi bir yapay zeka veya makine öğrenimi modelini, standart Python tip ipuçlarıyla REST API sunucusuna dönüştürmeyi sağlar. Dinamik batching ve model paralelliği gibi optimizasyon özellikleriyle CPU ve GPU kullanımını maksimize eder, ayrıca Docker container'lar aracılığıyla üretime hazır dağıtımı destekler.

BE

bentoml · MLOps & Yapay Zeka Altyapısı

YILDIZ8.9K
ÇATAL1.1K
COMMIT3.8K
KATKICI238
SÜRÜMv1.4.8
GÜNCELLEME2 gün önce
PythonModel ServingLLMApache-2.0

Bu kategorideki yaygın ticari ürünler: Weights & Biases, Amazon SageMaker, Databricks

Ne yapar?
  • Herhangi bir yapay zeka modelini Python kullanarak bir REST API sunucusuna dönüştürebilirsin.
  • Dinamik batching ve model paralelliği özellikleriyle CPU ve GPU kaynak kullanımını optimize edebilirsin.
  • Model bağımlılıklarını ve sürümlerini yöneterek Docker container'ları oluşturabilir ve üretime dağıtabilirsin.
Kullanıcı yorumları
  • • NötrHacker News

    HN göster: BentoML 1.0 gidiyor – Modellerinizi üretime göndermenin daha hızlı bir yolu

    “Son zamanlarda BentoML'i denedim ve benim için torçserve iş akışlarından çok daha iyi çalıştı. Bazı erken sürüm kusurları (dokümantasyon, API değiştirme) vardır, ancak topluluk Github ve BentoML Slack üzerinde çok duyarlıdır. btw: BentoML kendi ayakları üzerinde duruyor ve kesinlikle...”

  • ↑ OlumluHacker News

    HN göster: BentoML 1.0 gidiyor – Modellerinizi üretime göndermenin daha hızlı bir yolu

    “BentoML, makine öğrenme modellerinizi API'ler olarak hızlı ve kolay bir şekilde deploy'ya dönüştürmenizi sağlayan inanılmaz bir araçtır. Son derece kullanıcı dostu ve kullanımı kolaydır ve sonuçlar şaşırtıcıdır. deploy kendi makine öğrenme modelleri isteyen herkes için BentoML şiddetle tavsiye ederim...”

Web Sitesi GitHub

Notum

Alternatif sayfaları

Aynı kategoride: MLOps & Yapay Zeka Altyapısı