Databot

Toate site-urile vor fi listate în interiorul unui fișier text, care va fi folosit ca o intrare pentru script-ul pentru a rula.
Codul este bine comentat și ar trebui să ofere toate sfaturile necesare pentru configurare.
Paginile pot decât pe analizat și informații extrase din ele.
Fișierele salvate rezultate sunt stocate într-un sub-folder denumit de URL-ul paginii preluate și fișierele sunt denumite cu actuala ștampila data / ora, pentru a preveni fișierele de a fi suprascrise.