rastreador web gratuito, se usar junto com o construtor de mecanismos de busca -lexst-SEA, você pode indexar 10 bilhões de páginas. Multi threads e web crawler distribuído, tanto para internet quanto para interanet. Você pode controlar a frequência que a aranha deve rastrear suas páginas, você pode salvar as páginas localmente ou enviado para um solicitante de mecanismo de busca.
história da versão
- Versão Spider1.0 postado em 2009-06-23
Detalhes do programa
- Categoria: Rede & Internet > Ferramentas de pesquisa/pesquisa
- Editor: Dustgem Co.,Ltd
- Licença: Livre
- Preço: N/A
- Versão: 1.0
- Plataforma: windows