Scrapyd
Scrapyd, Scrapy örümceklerini dağıtmak ve çalıştırmak için kullanılan bir servis daemonudur. Scrapy projelerini yüklemeye ve örümcekleri bir JSON API aracılığıyla kontrol etmeye imkan tanır.
Scrapyd
100scrapy · Web Kazıma & Otomasyon
Bu kategorideki yaygın ticari ürünler: Bright Data, Apify, ScrapingBee
- Scrapy projelerini sunucuya yükleyerek örümcekleri çalıştırırsın
- JSON API kullanarak Scrapy örümceklerini kontrol edersin
- Scrapy projelerini ve örümceklerini uzak bir servis üzerinden yönetirsin
- • NötrGitHub Issue
Dağıtım başarısız oldu (400)
“Eski hizmetim var, python 3.7.1'yu kullanın ve screyd deploy'yu kullanın son zamanlarda yeni bir hizmetim var ve kullanıcı python 3.7.3'yu kullanın, screyd yeni bir hizmette çalışabilir. ancak deploy başarısız olduğunda, dağıtım hakkında ne anlama geldiğini söyleyebilecek olanlar başarısız oldu (400), bu konuda herhangi bir bilgi bulamıyorum...”
- • NötrGitHub Issue
BLOB için scrayd sqlite3 utils'de yanlış tip adaptasyon
“Bukle -d project=default -d spider=spider1 çalıştırdığımda, scrayd konsoluna gidiyorum ve İstisnayı görüyorum: [-] İşlenmemiş Hata Traceback (en son çağrı son): Dosya "/home/scrapyV1/venv/lib/python2.7/site-packages/twisted/internet/defer.py", satır 150, belki Ertelendi...”