promptfoo
Promptfoo, büyük dil modelleri (LLM) tabanlı uygulamaların değerlendirilmesi ve güvenlik testlerinin yapılması için geliştirilmiş bir komut satırı aracı ve kütüphanedir. Bildirimsel yapılandırmalar kullanarak farklı modellerin performansını karşılaştırmanıza ve güvenlik açıklarını taramanıza olanak tanır. Yerel olarak çalışabilen bu araç, CI/CD süreçlerine entegre edilebilir.
promptfoo
100promptfoo · DevOps / Derleme / Altyapı
Bu kategorideki yaygın ticari ürünler: GitHub Actions, CircleCI, Atlassian Bamboo
- Otomatik değerlendirme süreçleriyle istemlerinizi ve modellerinizi test edebilirsin.
- Red teaming ve güvenlik taramaları yaparak LLM uygulamalarının güvenliğini sağlayabilirsin.
- Farklı modellerin performansını yan yana getirerek karşılaştırabilirsin.
- • Yüksek açık issue sayısı (889)
- • NötrHacker News
Promptfoo OpenAI'ye Katılıyor
“Hey HN - Michael burada, Prompterfoo'nun kurucu ortağı. Sorulara cevap vermekten mutluluk duyarım. Bunu okuyor olsaydım sorardım: Promptfoo open source'ya ne olur? Bunu sürdürmeye devam edeceğiz. repo aynı lisans altında halka açık kalacak, çoklu destek vermeye devam edeceğiz...”
- • NötrHacker News
Promptfoo OpenAI'ye Katılıyor
“Kesinlikle harikasınız. Prompterfoo ile bir endüstri standardı oluşturdunuz. open source'yu tutmak doğru seçimdi.”
README ile doğrulandı · 26 Eki 2026 · kaynak