opik

LLM uygulamaları, RAG sistemleri ve ajan iş akışları için açık kaynaklı gözlemlenebilirlik ve değerlendirme platformudur. İzleme, veri kümeleri, LLM-as-a-judge metrikleri, istem yönetimi ve üretim izleme panoları sunar. Platform Apache-2.0 lisanslıdır ve tamamen kendi sunucuna kurulabilir.

OP

opik

New80

comet-ml · AI / LLM / RAG

STARS23.1K
FORKS1.9K
COMMITS0
CONTRIBUTORS0
VERSION2.2.127
UPDATEDtoday
evaluationhacktoberfesthacktoberfest2025langchainApache-2.0

Common commercial products in this category: ChatGPT, Claude, Gemini

What can it do?
  • LLM çağrılarını ve çok adımlı ajanların araç kullanımını iz ağaçlarıyla izleyebilirsin
  • Veri kümeleri, deneyler ve LLM-as-a-judge metrikleriyle halüsinasyon ve RAG kalitesini değerlendirebilirsin
  • Opik Agent Optimizer SDK ile istemleri ve ajanları iyileştirebilirsin
User reviews
  • ↑ PositiveHacker News

    Show HN: Opik, an open source LLM evaluation framework

    “Great question. First, we have a ton of respect for the work the DeepEval team is doing. That said, we took a fundamentally different approach in building Opik as an open source project. With DeepEval, if you want to log your data or use the UI, you need to use Confident AI's…”

  • ↑ PositiveHacker News

    Show HN: Opik, an open source LLM evaluation framework

    “Fantastic to hear! Opik should work with OpenRouter out of the box, particularly if you are using the OpenAI Python client to interface with OpenRouter. Opik's integration with OpenAI is implemented via their Python library, and so it is agnostic with respect to actual backend…”

Verified against README · Oct 30, 2026 · source

My note

Alternative pages

More in: AI / LLM / RAG