llm-scraper
LLM Scraper, web sayfalarından yapılandırılmış veri elde etmek için büyük dil modellerini kullanan bir TypeScript kütüphanesidir. Playwright altyapısı üzerine kurulu olan araç; GPT, Sonnet, Gemini, Llama ve Qwen model serilerini destekler. Zod veya JSON Schema kullanarak şema tanımlamaya ve tam tip güvenliği sağlamaya imkan tanır.
mishushakov · Yerel Yapay Zeka / Kendi Sunucunda LLM
Bu kategorideki yaygın ticari ürünler: ChatGPT, Claude, Gemini
- Web sayfalarındaki içerikleri Zod veya JSON Schema kullanarak yapılandırılmış verilere dönüştürebilirsin.
- HTML, markdown, ham metin veya ekran görüntüsü gibi altı farklı biçimlendirme modunu kullanarak veri çekebilirsin.
- GPT, Sonnet, Gemini, Llama ve Qwen model serileriyle nesne akışı (streaming objects) gerçekleştirebilirsin.
- • Yayınlanmış sürüm yok
- • NötrGitHub Issue
Örnek kod, çalışmıyor (hacker haber makaleleri)
“Merhaba, kazıyıcının çalışıp çalışmadığını görmek için örnek kodu denedim, ancak her zaman ton bir dizi olması gereken öznitelik üst için bir doğrulama hatası döndürür. İşte örnek kodum, yerel ollama kullanmak için biraz ayarlandı : javascript import krom 'oyun yazarı' import z ...”
- • NötrGitHub Issue
Oyun yazarı olmadan LLM kullanın
“Bunun için teşekkürler, gerçekten iyi! Bir sayfayı kazımak için oyun yazarı kullanmak ve içeriği çıkarmak için llm'den istemek yerine bir sayfanın ham html'ini göndermenin bir yolu var mı?”