Păianjen un site inteligent. Acest program păianjeni un site și creează fișiere de ieșire care conțin (1) o listă de URL-uri în site-ul, (2) un sitemap Google, (3) un fișier rezumat XML cu titlu, descriere, și cuvintele cheie pentru fiecare pagină, și (4)...

FetchBot

FetchBot 1.0

Colectarea de date de informații pentru o listă de domenii. Acest program adună date sumare pentru fiecare domeniu într-o listă. Se colectează informații geografice țara / statul de analiză de pagini, cum ar fi "contact" de pagini. . Se colectează Google...