Web Crawler

Kang Asu

Web Crawler

Web crawler dapat digunakan untuk mendapatkan link, email, gambar dan file di suatu website. Web crawler sendiri bisa mendeteksi beberapa rektori yang tidak dapat anda temukan. Web Crawler sendiri di desain simpel dengan UI yang mudah digunakan. Konsep crawler menggunakan multithreaded dengan meng-scan berdasarkan MIME types dan file extensions, yang berarti dapat menemukan link yang tersembunyi. Baik digunakan untuk mencari link admin page.

Features

•  Link and email scraping
• Regex search
• Controlled deep crawling
• support for ajax
• file filtering by MIME (PDF, gambar, MOF, Archives)

Download

 http://pasted.co/a8405734

Regards
Kang Asu