Scraperr
Scraperr, kod yazmadan web sitelerinden veri çekmenizi sağlayan self-hosted bir kazıma aracıdır. XPath tabanlı eleman çıkarımı, iş kuyruğu yönetimi, alan adı spider'lama, özel başlık ekleme ve medya indirme gibi temel özellikler sunar. Elde edilen verileri tablo formatında görüntüleyebilir, Markdown veya CSV olarak dışa aktarabilir ve çeşitli kanallar üzerinden bildirim alabilirsiniz.
Scraperr
10jaypyles · Web Kazıma & Otomasyon
Bu kategorideki yaygın ticari ürünler: Bright Data, Apify, ScrapingBee
- XPath tabanlı eleman seçimiyle hedef web sayfalarından kod yazmadan veri çekersin
- Birden fazla kazıma işini kuyruğa ekleyerek yönetir ve sonuçları CSV veya Markdown olarak dışa aktarırsın
- Aynı alan adı altındaki tüm sayfaları taramak için toplu spider'lama başlatırsın
- • Depo arşivlenmiş (artık geliştirilmiyor)
- • Son güncelleme 1 yıldan eski
- • NötrHacker News
Scraperr – A Self Hosted Webscraper
“repo'dan (kapalı): Scraper'ı kullanırken, lütfen şunu unutmayın: robots.txt Hizmet Oranı Şartlarına Etik kullanımı teşvik ettiği için Kudos'u Sınırlama; Sürünücü olarak sınır çizgisi ddos-bot'ları satan bazı dolandırıcılardan bir değişiklik yapar.”
- • NötrGitHub Issue
404
“Scraper'ı başlatmaya çalışıyorum, ancak localhots junk@junkbox scraper'a erişmeye çalışırken sadece bir 404 almaya çalışıyorum] docker oluşturmak -f docker-compose.yml --env-file .env up -d --force-recreate + Running 4/4 Ağ kazıyıcı web Oluşturuldu 0.1s Konteyner kazıyıcı...”