OpenRLHF

Ray ve vLLM dağıtık mimarisi üzerine kurulu, açık kaynaklı bir RLHF ve pekiştirmeli öğrenme framework'üdür. PPO, REINFORCE++ ve DAPO gibi algoritmaları, VLM desteğini ve ajan tabanlı tek ve çok turlu eğitimi destekler. Modelleri HuggingFace Transformers ile yükler, DeepSpeed ile eğitir.

OP

OpenRLHF

Yeni80

OpenRLHF · Yapay Zeka / LLM / RAG

YILDIZ10.1K
ÇATAL1.1K
COMMIT0
KATKICI0
SÜRÜMv0.11.2
GÜNCELLEME25 gün önce
large-language-modelsraylibreinforcement-learningtransformersApache-2.0

Bu kategorideki yaygın ticari ürünler: ChatGPT, Claude, Gemini

Ne yapar?
  • Ray ve vLLM ile GPU'lar arasında dağıtık RLHF eğitimi çalıştırabilirsin
  • PPO, REINFORCE++ ve DAPO dinamik filtreleme gibi algoritmaları kullanabilirsin
  • Örnek paketleme (--ds.packing_samples) ve vLLM motorlarıyla eğitim ve üretimi hızlandırabilirsin
Kullanıcı yorumları
  • • NötrGitHub Issue

    vllm +zero2 hangs

    “Team, thank you so much for this wonderful toolkit! we are trying to test the vllm setting with mistralai/Mistral-7B-Instruct-v0.2 model with zero2 ![image]( ray job submit --address=" \ --runtime-env-json='{"working_dir": "/openrlhf", "pip": "/openrlhf/requirements.txt"}' \ --…”

  • ↑ OlumluGitHub Issue

    vllm / actor broadcast error in multinode training

    “Hi Team when we try doing a multi-node run , the placement of vllm / actors is random , at time when the actor and vllmactor are placed in separate nodes , we great a broadcast error , is it possible to do multinode training with vllm in separate node ?”

Web Sitesi GitHub

README ile doğrulandı · 30 Eki 2026 · kaynak

Notum

Alternatif sayfaları

Aynı kategoride: Yapay Zeka / LLM / RAG