Colly
Colly, Go diliyle yazılmış temiz arayüze sahip bir web tarama ve veri çekme kütüphanesidir. Tek çekirdekte saniyede bin isteği aşabilen hız sunar; eş zamanlı, senkron veya asenkron tarama işlemlerini destekler. Alan adı başına istek gecikmesi yönetimi, otomatik çerez işleme, önbellekleme ve robots.txt desteği gibi yerleşik özellikler barındırır.
Colly
100gocolly · Web Kazıma & Otomasyon
Bu kategorideki yaygın ticari ürünler: Bright Data, Apify, ScrapingBee
- Web sitelerinden veri madenciliği, veri işleme ve arşivleme amaçlı yapılandırılmış veriler ayıklarsın
- Alan adı başına maksimum eş zamanlılık ve istek gecikmelerini yöneterek tarama operasyonları yürütürsün
- Otomatik çerez ve oturum yönetimi ile non-unicode yanıtların kodlanmasını sağlayarak crawler yapılandırırsın
- ↑ OlumluHacker News
Colly – Golang için Kazıma Çerçevesi
“Lütfen ana colly.go dosyanızı ayrı parçalara ayırın. Mümkünse, çerezleri ve regex'ten html'e ve senkronizasyon erişimine kadar her şeyi kapsayan 30 satırlık bir ithalat tanımına sahip olmamanız gerekir. Diğer kutuda DNS önbelleklemesini kullandığınızdan emin olun, Go'ya ekleyin. Colly sadece bir tanesini destekliyor...”
- • NötrHacker News
Colly – Golang için Kazıma Çerçevesi
“İyi performans, iyi bir ağ altyapısına sahip olmanız veya sunucunuzun sınırlı kaynakları olması durumunda önemlidir. Bant genişliği ve IP sınırları en yaygın şişe boyunlarıdır, ancak bunlar birden fazla proxy ve ssh tüneli kullanılarak çözülebilir. Colly, proxy'leri değiştirmek için destek oluşturdu...”
README ile doğrulandı · 26 Eki 2026 · kaynak