dCrawl

Наслаждайтесь миллионами последних приложений для Android, игр, музыки, фильмов, телевидения, книг, журналов и многого другого. В любое время, где угодно, на ваших устройствах.

dCrawl - это веб -гусеница (также известный как веб -паук): цель состоит в том, чтобы сканировать ссылки на страницы веб -сайта, чтобы получить список файлов и каталогов, размещенных на целевом сервере.

Crawler только получает файлы, которые явно связаны на веб -сайте, он не будет открывать новые файлы волшебным образом. Это приложение полезно только в том случае, если вы хотите узнать, какие файлы, размещенные на определенном веб -сайте, или, если вы являетесь владельцем веб -сайта, чтобы узнать, сколько файлов легко достижимо от посетителей.

Поскольку dCrawl все еще разрабатывается, время от времени может происходить странное поведение (ошибки): вы можете найти «неправильные» файлы (например, файлы, которые не существуют, фрагменты кода JavaScript и т. Д.). Или что -то подобное не существует.

Другие вещи, которые могут произойти на каком -то веб -сайте (и это в основном проблема веб -сайта), заключается в том, что для каждой посещаемой страницы другие страницы «созданы» (например, посещение/Goto/Fail могут создать страницу, содержащую ссылку A/goto/fail/goto/fail, которая затем будет содержать ссылку A/goto/fail/goto/fail/goto/fail/so ale). Когда вы понимаете, что этот вид цикла продолжается, вы можете остановить выполнение, используя кнопку «Остановить».

И последнее: избегайте сканирования огромного количества файлов, так как а) владелец веб -сайта может быть не доволен этим, и б) вы можете использовать всю доступную память.

При этом, пожалуйста, имейте в виду, что dCrawl все еще находится в стадии разработки, поэтому новые обновления будут доступны время от времени.

Тодо:

- Игнорировать код JavaScript при анализе страницы

- Читать файл robots.txt (если это возможно), чтобы получить больше файлов и каталогов для работы (не очень справедливо, но я такой злой)

- различать (возможно, используя другой цвет) непустые каталоги от файлов и пустых каталогов

- Экспорт результатов сканирования

- Исправьте ошибки, которые вы, замечательные люди, расскажете мне подробно и добрым способом :-)

Если бы вам понравилось это приложение, пожалуйста, подумайте о том, чтобы с использованием BTC, я бы очень признателен о

18xjhdrt1xdhvgeezghrqxmkr4z3qspt