Наслаждайтесь миллионами последних приложений для Android, игр, музыки, фильмов, телевидения, книг, журналов и многого другого. В любое время, где угодно, на ваших устройствах.
dCrawl - это веб -гусеница (также известный как веб -паук): цель состоит в том, чтобы сканировать ссылки на страницы веб -сайта, чтобы получить список файлов и каталогов, размещенных на целевом сервере.
Crawler только получает файлы, которые явно связаны на веб -сайте, он не будет открывать новые файлы волшебным образом. Это приложение полезно только в том случае, если вы хотите узнать, какие файлы, размещенные на определенном веб -сайте, или, если вы являетесь владельцем веб -сайта, чтобы узнать, сколько файлов легко достижимо от посетителей.
Поскольку dCrawl все еще разрабатывается, время от времени может происходить странное поведение (ошибки): вы можете найти «неправильные» файлы (например, файлы, которые не существуют, фрагменты кода JavaScript и т. Д.). Или что -то подобное не существует.
Другие вещи, которые могут произойти на каком -то веб -сайте (и это в основном проблема веб -сайта), заключается в том, что для каждой посещаемой страницы другие страницы «созданы» (например, посещение/Goto/Fail могут создать страницу, содержащую ссылку A/goto/fail/goto/fail, которая затем будет содержать ссылку A/goto/fail/goto/fail/goto/fail/so ale). Когда вы понимаете, что этот вид цикла продолжается, вы можете остановить выполнение, используя кнопку «Остановить».
И последнее: избегайте сканирования огромного количества файлов, так как а) владелец веб -сайта может быть не доволен этим, и б) вы можете использовать всю доступную память.
При этом, пожалуйста, имейте в виду, что dCrawl все еще находится в стадии разработки, поэтому новые обновления будут доступны время от времени.
Тодо:
- Игнорировать код JavaScript при анализе страницы
- Читать файл robots.txt (если это возможно), чтобы получить больше файлов и каталогов для работы (не очень справедливо, но я такой злой)
- различать (возможно, используя другой цвет) непустые каталоги от файлов и пустых каталогов
- Экспорт результатов сканирования
- Исправьте ошибки, которые вы, замечательные люди, расскажете мне подробно и добрым способом :-)
Если бы вам понравилось это приложение, пожалуйста, подумайте о том, чтобы с использованием BTC, я бы очень признателен о
18xjhdrt1xdhvgeezghrqxmkr4z3qspt