SiteSpider 1.0

Aranha um site de forma inteligente. Este programa aranhas um site e cria arquivos de saída que contêm (1) uma lista de URLs no site, (2) um mapa do site Google, (3) um arquivo de resumo XML com título, descrição e palavras-chave para cada página, e (4)...