[giecl9$]

Parsero adalah suatu tools untuk mencari situs atau directory pada sebuah website yang di Disallow oleh robots.txt, keperluan untuk tools Parsero adalah :
- Python3
- Python3-pip
- Urllib3
- Beautifulsoup4

Code:

1. Install Python3 ketik perintah di terminal :
   apt-get install python3
2. Lalu download distribute_setup.py di link berikut ini :
   http://tinyurl.com/klwl659]distribute_setup.py
3. Install distribute_setup.py dengan perintah :
   python3 distribute_setup.py (pastikan python3 sudah terinstall)
4. Lalu install easy_install pip :
   python3 -m easy_install pip
5. Lalu install urllib3, ketik perintah :
   easy_install urllib3
6. Install beautifulsoup4 :
   easy_install beautifulsoup4

Setelah selesai semua itu di install jalankan tools Parsero dengan perintah :

Code:

1. python3 parsero.py
Contoh nya saya akan detect robots.txt pada situs http://www.xxx.ac.id
2. python3 parsero.py -u www.xxx.ac.id -o -sb
lalu akan muncul beberapa directory atau file yang di Disallow oleh robots.txt...nah selesai deh,,,

Thanks...
Sorry kalo repost..

---

http://tinyurl.com/klwl659]distribute_setup.py revisi jadi http://tinyurl.com/klwl659