Crawlee JS

Crawlee, Node.js için JavaScript ve TypeScript ile yazılmış, taramayı ve veri kazımayı uçtan uca kapsayan bir web kazıma ve tarayıcı otomasyonu kütüphanesidir. Varsayılan yapılandırmayla bile insan benzeri davranarak modern bot korumalarına takılmadan bağlantı taramayı, veri çekmeyi ve verileri diske ya da buluta kaydetmeyi sağlar. HTTP ve headless tarayıcı taraması için tek arayüz, kalıcı URL kuyruğu, otomatik ölçekleme ve entegre proxy rotasyonu sunar.