Nikmati jutaan aplikasi android terbaru, game, musik, film, TV, buku, majalah & lainnya. Kapan saja, di mana saja, di seluruh perangkat Anda.
dCrawl adalah perayap web (juga dikenal sebagai laba -laba web): Tujuannya adalah untuk memindai tautan halaman situs web untuk mendapatkan daftar file dan direktori yang di -host di server target.
Crawler hanya mengambil file yang secara eksplisit ditautkan di situs web, itu tidak akan menemukan file baru secara ajaib. Aplikasi ini hanya berguna jika Anda ingin mengetahui jenis file yang dihosting di situs web tertentu atau, jika Anda adalah pemilik situs web, untuk mengetahui jumlah file yang mudah dijangkau dari pengunjung.
Karena dCrawl masih sedang dikembangkan, perilaku aneh (bug) dapat terjadi dari waktu ke waktu: Anda mungkin menemukan file "salah" (misalnya file yang tidak ada, cuplikan kode JavaScript, dan sebagainya) di antara hasilnya: Anda kemungkinan besar akan menyadari bahwa beberapa file bukan file yang sebenarnya, tetapi masih tidak terlalu marah ketika Anda menyadari bahwa "dokumen. Lokasi." Atau sesuatu seperti itu tidak ada.
Hal -hal lain yang dapat terjadi di beberapa situs web (dan ini sebagian besar masalah situs web) adalah bahwa, untuk setiap halaman yang dikunjungi, halaman lain "dibuat" (misalnya mengunjungi/goto/fag mungkin membuat halaman yang berisi tautan/goto/fail/fail/fail tautan, yang kemudian akan berisi tautan/goto/fail/goto/fail/goto/fail dan karenanya). Ketika Anda menyadari bahwa loop semacam ini sedang berlangsung, Anda dapat menghentikan eksekusi menggunakan tombol "Stop".
Satu hal terakhir: Hindari memindai sejumlah besar file karena a) pemilik situs web mungkin tidak senang dengan hal itu dan b) Anda mungkin akhirnya menggunakan semua memori yang tersedia.
Ini dikatakan, harap diingat bahwa dCrawl masih sedang dalam pengembangan, maka pembaruan baru akan tersedia setiap saat.
TODO:
- Abaikan kode JavaScript saat mem -parsing halaman
- Baca file robots.txt (jika tersedia) untuk mendapatkan lebih banyak file dan direktori untuk dikerjakan (tidak benar -benar adil, tapi saya jahat seperti itu)
- Bedakan (mungkin menggunakan warna berbeda) direktori non-kosong dari file dan direktori kosong
- Ekspor hasil pemindaian
- Perbaiki bug yang Anda ajarkan akan memberi tahu saya dengan cara yang terperinci dan baik :-)
Jika Anda menikmati aplikasi ini, harap pertimbangkan untuk memberi tip menggunakan BTC, saya akan sangat menghargainya
18xjhdrt1xdhvgeezghrqxmkr4z3qspt
unduh