nanoGPT

nanoGPT, orta ölçekli GPT modellerini eğitmek ve ince ayar yapmak için yazılmış sade bir PyTorch deposudur; yaklaşık 300 satırlık eğitim döngüsü ve 300 satırlık model tanımı içerir, OpenAI GPT-2 ağırlıklarını yükleyebilir. train.py, OpenWebText üzerinde GPT-2 (124M) modelini yeniden üretir. Yazarı Kasım 2025 itibarıyla depoyu eski ve kullanımdan kaldırılmış (deprecated) ilan etmiş, yerine nanochat'i önermektedir.

NA

karpathy · Yapay Zeka / LLM / RAG

YILDIZ64.3K
ÇATAL11.0K
COMMIT210
KATKICI37
SÜRÜM—
GÜNCELLEME11 ay önce
PythonGPT EğitimiAraştırmaKarpathyMIT

Bu kategorideki yaygın ticari ürünler: ChatGPT, Claude, Gemini

Ne yapar?
  • Shakespeare verisinden yola çıkarak karakter tabanlı bir küçük GPT modelini hızlıca eğitirsin
  • OpenAI tarafından sağlanan GPT-2 ağırlıklarını modele yükleyerek kullanırsın
  • Önceden eğitilmiş kontrol noktaları üzerinden ince ayar (finetune) yaparsın
Kullanıcı yorumları
  • • NötrHacker News

    karpathy/build-nanogpt: NanoGPT'nin sıfırdan inşasına ilişkin video + kod dersi

    “H1: build nanoGPT Title: Video + kod nutuk nanoGPT sıfırdan inşa Lütfen başlıkları öne çıkarmak için bir şeyler yapmayın (..) Aksi takdirde lütfen orijinal başlığı kullanın”

  • • NötrGitHub Issue

    M1 "MPS" üzerinde eğitim

    “Çoğu insanın 8XA100 40GB sistemine erişimi yoktur. Ancak 64 GB hafızaya sahip tek bir M1 Max dizüstü bilgisayar eğitime ev sahipliği yapabilir. Bu kodu "MPS" ye taşımak ne kadar zor?”

GitHub

README ile doğrulandı · 26 Eki 2026 · kaynak

Notum

Alternatif sayfaları

Aynı kategoride: Yapay Zeka / LLM / RAG