수백만의 최신 Android 앱, 게임, 음악, 영화, TV, 책, 잡지 등을 즐기십시오. 언제 어디서나 장치를 가로 질러.
dCrawl 은 웹 크롤러 (웹 스파이더라고도 함)입니다. 목적은 대상 서버에서 호스팅되는 파일 및 디렉토리 목록을 얻기 위해 웹 사이트 페이지의 링크를 스캔하는 것입니다.
Crawler는 웹 사이트에서 명시 적으로 연결된 파일 만 검색되므로 새 파일을 마술처럼 발견하지 못합니다. 이 앱은 특정 웹 사이트에서 호스팅되는 파일의 종류를 대략 알고 싶거나 웹 사이트 소유자 인 경우 방문자로부터 쉽게 도달 할 수있는 파일의 양을 알기 위해 유용합니다.
dCrawl 여전히 개발되고 있기 때문에 이상한 동작 (버그)은 때때로 발생할 수 있습니다. 결과 중에서 "잘못된"파일 (예 : 존재하지 않는 파일, JavaScript 코드 스 니펫 등)을 찾을 수 있습니다. 일부 파일은 실제 파일이 아니지만 "문서 .location.href;" 또는 그런 것이 존재하지 않습니다.
일부 웹 사이트에서 발생할 수있는 다른 일 (그리고 이것은 대부분 웹 사이트의 문제입니다), 방문하는 모든 페이지에 대해 다른 페이지가 "생성"(예 : 방문/goto/실패는 A/GOTO/FAIL/GOTO/FAIL 링크가 포함 된 페이지를 생성 할 수 있다는 것입니다. 이런 종류의 루프가 진행되고 있음을 알면 "정지"버튼을 사용하여 실행을 중지 할 수 있습니다.
마지막으로 : a) 웹 사이트 소유자가 그것에 대해 행복하지 않을 수도 있고 b) 사용 가능한 모든 메모리를 사용하게 될 수 있으므로 수많은 파일을 스캔하지 마십시오.
이것은 dCrawl 아직 개발 중이라는 점을 명심하십시오. 따라서 새로운 업데이트는 매번 사용할 수 있습니다.
TODO :
- 페이지를 구문 분석 할 때 JavaScript 코드를 무시하십시오
-Robots.txt 파일 (사용 가능한 경우)을 읽으려면 더 많은 파일과 디렉토리가 작업 할 수 있습니다 (실제로 공정하지는 않지만 나는 그렇게 악합니다)
- 파일 및 빈 디렉토리와 비어있는 디렉토리를 구별 (다른 색상 사용) 구별하십시오.
- 스캔 결과를 내 보냅니다
- 당신이 멋진 사람들이 나에게 상세하고 친절한 방식으로 나에게 말할 버그를 수정하십시오 :-)
이 앱을 즐겼다면 BTC를 사용하여 팁을주십시오. 정말 감사하겠습니다.
18xjhdrt1xdhvgeezghrqxmkr4z3qspt