dCrawl

เพลิดเพลินไปกับแอพ Android เกมเกมเพลงภาพยนตร์ทีวีหนังสือนิตยสารและอื่น ๆ อีกมากมาย ทุกที่ทุกเวลาข้ามอุปกรณ์ของคุณ

dCrawl เป็นเว็บรวบรวมข้อมูลเว็บ (หรือที่รู้จักกันในชื่อ Web Spider): จุดประสงค์คือการสแกนลิงก์ของหน้าเว็บไซต์เพื่อรับรายการไฟล์และไดเรกทอรีที่โฮสต์บนเซิร์ฟเวอร์เป้าหมาย

ตัวรวบรวมข้อมูลจะดึงไฟล์ที่เชื่อมโยงอย่างชัดเจนบนเว็บไซต์เท่านั้นมันจะไม่ค้นพบไฟล์ใหม่อย่างน่าอัศจรรย์ แอพนี้มีประโยชน์เฉพาะในกรณีที่คุณต้องการทราบประเภทของไฟล์ที่โฮสต์บนเว็บไซต์บางแห่งหรือหากคุณเป็นเจ้าของเว็บไซต์เพื่อทราบจำนวนไฟล์ที่เข้าถึงได้ง่ายจากผู้เข้าชม

เนื่องจาก dCrawl ยังคงได้รับการพัฒนาพฤติกรรมแปลก ๆ (ข้อบกพร่อง) อาจเกิดขึ้นเป็นครั้งคราว: คุณอาจพบไฟล์ "ผิด" (เช่นไฟล์ที่ไม่มีอยู่, ข้อมูลโค้ด JavaScript และอื่น ๆ ) ท่ามกลางผลลัพธ์: คุณมักจะตระหนักว่าไฟล์บางไฟล์ไม่ใช่ไฟล์จริง หรืออะไรทำนองนั้นไม่มีอยู่จริง

สิ่งอื่น ๆ ที่อาจเกิดขึ้นในบางเว็บไซต์ (และส่วนใหญ่เป็นปัญหาของเว็บไซต์) คือสำหรับทุกหน้าที่เข้าเยี่ยมชมหน้าอื่น ๆ จะ "สร้าง" (เช่นการเยี่ยมชม/goto/fail อาจสร้างหน้าเว็บที่มีลิงค์/goto/fail/goto/fail เมื่อคุณตระหนักว่าการวนซ้ำประเภทนี้กำลังเกิดขึ้นคุณสามารถหยุดการดำเนินการโดยใช้ปุ่ม "หยุด"

สิ่งหนึ่งสุดท้าย: หลีกเลี่ยงการสแกนไฟล์จำนวนมากเนื่องจากก) เจ้าของเว็บไซต์อาจไม่พอใจกับมันและ b) คุณอาจจบลงด้วยการใช้หน่วยความจำทั้งหมดที่มีอยู่

สิ่งนี้ถูกกล่าวว่าโปรดทราบว่า dCrawl ยังอยู่ระหว่างการพัฒนาดังนั้นการอัปเดตใหม่จะมีให้ทุก ๆ ครั้ง

สิ่งที่ต้องทำ:

- ละเว้นรหัส JavaScript เมื่อแยกวิเคราะห์หน้า

- อ่านไฟล์ robots.txt (ถ้ามี) เพื่อรับไฟล์และไดเรกทอรีเพิ่มเติมเพื่อทำงาน (ไม่ยุติธรรมจริง ๆ แต่ฉันชั่วร้ายแบบนั้น)

- แยกแยะ (อาจใช้สีที่แตกต่าง) ไดเรกทอรีที่ไม่ว่างเปล่าจากไฟล์และไดเรกทอรีที่ว่างเปล่า

- ส่งออกผลลัพธ์ของการสแกน

- แก้ไขข้อบกพร่องที่คุณยอดเยี่ยมจะบอกฉันด้วยวิธีที่มีรายละเอียดและใจดี :-)

หากคุณสนุกกับแอพนี้โปรดพิจารณาทิปโดยใช้ BTC ฉันจะขอบคุณมันจริงๆ

18xJHDRTRT1XDHVGEEZGHRQXMKR4Z3QSPT