Robots.txt 2.0
Você poderá baixar em 5 segundos.
Sobre Robots.txt
Robots.txt é um editor visual para Arquivos de Exclusão de Robôs e um software de analisador de registro. Ele permite que o usuário crie rapidamente e facilmente os arquivos .txt robôs necessários para instruir as aranhas do mecanismo de busca, quais partes de um site não devem ser indexadas e tornadas pesquisáveis pelo público geral da Web e, em seguida, identificar aranhas, que não mantêm essas instruções. O programa fornece ao usuário uma maneira de fazer logon em seu FTP ou servidor de rede local e, em seguida, selecionar os documentos e diretórios que não devem ser pesquisados. Por meio deste programa, você poderá gerar visualmente robôs padrão da indústria.txt arquivos; identificar aranhas maliciosas e indesejadas e bani-las do seu site; rastreadores diretos do mecanismo de busca para as páginas apropriadas para sites multilíngues; usar robôs.txt arquivos para gerenciamento de páginas de porta; manter aranhas fora de áreas sensíveis e privadas do seu site; carregar os arquivos .txt robôs corretamente formatados diretamente para o servidor FTP que não mudar de Robôs.txt Editor; rastrear visitas de aranha; criar relatórios de visitas de aranha nos formatos HTML, Microsoft Excel CSV e XML e muito mais. Atualizações e atualizações do programa gratuitos sem restrições no tempo; número ilimitado de sites para trabalhar