scrape-it
scrape-it, Node.js tabanlı web sitelerinden veri çekmek için kullanılan basit bir modüldür. Promise tabanlı arayüzü sayesinde hedef URL'lerden HTML verilerini seçiciler aracılığıyla ayrıştırabilir ve yapılandırılmış nesneler elde edebilirsiniz. Ayrıca yerel dosyaları veya önceden yüklenmiş HTML içeriklerini ayrıştırmak için .scrapeHTML metodunu destekler.
SC
IonicaBizau · Web Kazıma & Otomasyon
YILDIZ4.1K
ÇATAL218
COMMIT0
KATKICI0
SÜRÜM6.1.15
GÜNCELLEME10 gün önce
JavaScriptNode.jsWeb KazımaParserMIT
Bu kategorideki yaygın ticari ürünler: Bright Data, Apify, ScrapingBee
Ne yapar?
- Hedef bir web sayfasından seçiciler kullanarak başlık, açıklama ve bağlantı gibi verileri çekersin.
- Promise veya Async-Await yapısını kullanarak veri çekme işlemlerini asenkron olarak yürütürsün.
- Yerel dosyalardan veya yüklenen HTML içeriklerinden .scrapeHTML metoduyla veri ayrıştırırsın.
Kullanıcı yorumları
- • NötrGitHub Issue
Sürünme için destek ekle
“Sayfaları taramak ve bağlantıları takip etmek için destek eklemek güzel olurdu. Önerim: - Eşzamanlılık desteği - İstek gecikmesi”
- • NötrGitHub Issue
Bir konteyner oluşturmak için bir Dockerfile ekleyin
“Bu, scrape-it'in bir hizmet olarak dağıtılmasına yardımcı olacaktır.”