WWWGrab é uma ferramenta de extração de dados de página web e geração de banco de dados, ou "web scraper". Ele verifica as listas de URL em um banco de dados, busca as páginas da Web listadas e as analisa com o mecanismo de transformação de dados DTBuild. O WWWGrab pode executar sequências de url scans e operações de banco de dados SQL, permitindo várias passagens sobre dados gerados "no fly" (no tempo de execução).
Os parsers wwwgrab são criados com o workshop de transformação de dados DTBuild. Na hora de execução, o WWWGrab recebe uma página da Web e envia-a para o mecanismo DTBuild, que transforma a página da Web com o analisador especificado.
O WWWGrab é controlado por uma lista de tarefas especificadas em um banco de dados. Existem dois tipos de tarefa:
1. digitalizar uma lista de URL,
2. executar uma lista SQL.
O usuário pode combinar qualquer número de url scans e execuções SQL em uma lista de tarefas. Por exemplo, uma lista de tarefas poderia:
* digitalize uma lista inicial de URLs,
* gerar uma nova lista de URLs,
* modificar a lista de URL gerada com SQL,
* digitalize a lista de URL gerada+modificada,
* gerar outra lista de URL,
* etc.
A flexibilidade combinada do WWWGrab e do DTBuild permite uma grande variedade de tarefas de transformação de dados da Web. Consulte dTBuild ajuda para obter mais informações.
Recursos wwwgrab / DTBuild:
* Recursos recursivos (permitindo a análise de tags HTML/XML aninhadas, comentários, etc.)
* Capacidade de entrada/saída de cadeias largas (Unicode)
* Interface ODBC que exibe informações de layout do banco de dados (nomes de tabela e campo) para o usuário
* Interface ODBC permitindo a construção de declarações SQL com uma combinação de dados definidos pelo usuário e dados reconhecidos
* Modo de rastreamento para mostrar correspondência entre entrada e nós (para depuração)
* Interface de função definida pelo usuário permitindo a execução de código DLL personalizado ...
A assistência de configuração está disponível.
história da versão
- Versão 1.33 postado em 2009-04-07
Correção de indexação da tabela de controle. Aprimoramento para a amostra de cotações.
- Versão 1.31 postado em 2008-12-05
Novas opções, correções de bugs
Detalhes do programa
Eula
EULA - Contrato de Licença do Usuário Final
Contrato de licença do usuário final
LEIA CUIDADOSAMENTE O SEGUINTE CONTRATO DE LICENÇA. VOCÊ ACEITA E CONCORDA EM SER VINCULADO POR ESTE CONTRATO DE LICENÇA CLICANDO NO "YES" BOTÃO EXIBIDO ABAIXO. SE VOCÊ NÃO CONCORDAR COM ESTA LICENÇA, CLIQUE NO "NO" BOTÃO E A INSTALAÇÃO SERÁ CANCELADA.
Concessão de Licença
"Você" significa a pessoa ou empresa que está sendo licenciada para usar o Software ou Documentação. "Nós," "us" e "our" significa DTUtilities.com.
Nós lhe concedemos uma licença não exclusiva para usar uma cópia do Software em qualquer computador, desde que o Software esteja em uso em apenas um computador a qualquer momento. O Software é "em uso" em um computador quando é carregado em memória temporária (RAM) ou instalado na memória permanente de um computador - por exemplo, um disco rígido, CD-ROM ou outro dispositivo de armazenamento.
Se o Software estiver permanentemente instalado no disco rígido ou em outro dispositivo de armazenamento de um computador (além de um servidor de rede) e uma pessoa usar esse computador mais de 80% do tempo, essa pessoa também pode usar o Software em um computador portátil ou doméstico.
Título
Continuamos sendo o proprietário de todos os direitos, títulos e interesses no Software e materiais escritos explicativos relacionados ("Documentação").
Cópias de arquivamento ou backup
Você pode copiar o Software para fins de backup e arquivamento, desde que a original e cada cópia seja mantida em sua posse e que sua instalação e uso do Software não exceda o permitido na seção "License Grant" seção acima.
Coisas que você não pode fazer
O Software e a Documentação são protegidos pelas leis de direitos autorais dos Estados Unidos e tratados internacionais. Você deve tratar o Software e a Documentação como qualquer outro material protegido por direitos autorais , por exemplo, um livro. Você não pode:
copiar a Documentação,
copiar o Software, exceto para fazer cópias de arquivamento ou backup conforme fornecido acima,
modificar ou adaptar o Software ou mesclá-lo em outro programa,
engenharia reversa, desmonte, descompilile ou faça qualquer tentativa de descobrir o código fonte do Software,
colocar o Software em um servidor para que ele seja acessível através de uma rede pública, como a Internet, ou
sublicença, aluguel, alugue ou empreste qualquer parte do Software ou Documentação.
Transferências
Você pode transferir todos os seus direitos de uso do Software e Documentação para outra pessoa ou pessoa jurídica desde que você transfira este Contrato, o Software e a Documentação, incluindo todas as cópias, atualizações e versões anteriores a tal pessoa ou entidade e que você não retém cópias, incluindo cópias armazenadas no computador.
Garantia Limitada
Nós garantimos que por um período de 90 dias após a entrega desta cópia do Software para você:
a mídia na qual esta cópia do Software é fornecida a você estará livre de defeitos em materiais e fabricação sob normalhe Software é fornecido a você estará livre de defeitos em materiais e fabricação sob uso normal, e
o Software será realizado de acordo com a Documentação.
Na medida permitida pela lei aplicável, a garantia limitada anterior está em vez de todas as outras garantias ou condições, expressas ou implícitas, e nós isentamos todas e todas as garantias ou condições implícitas, incluindo qualquer garantia implícita de título, não injúra, comercialização ou aptidão para um propósito específico, independentemente de sabermos ou termos razão para saber de suas necessidades particulares. Nenhum funcionário, agente, revendedor ou distribuidor nosso está autorizado a modificar esta garantia limitada, nem para fazer quaisquer garantias adicionais.
ALGUNS ESTADOS NÃO PERMITEM A LIMITAÇÃO OU EXCLUSÃO DA RESPONSABILIDADE POR DANOS INCIDENTAIS OU CONSEQUENTES, DE MODO QUE A LIMITAÇÃO ACIMA PODE NÃO SE APLICAR A VOCÊ.
Remédio Limitado
Toda a nossa responsabilidade e o seu recurso exclusivo por violação da garantia anterior devem ser, a nossa opção, para qualquer um:
devolver o preço que você pagou, ou
reparar ou substituir o Software ou a mídia que não atenda à garantia anterior se ele for devolvido a nós com uma cópia do seu recibo.
EM NENHUM CASO SEREMOS RESPONSÁVEIS POR QUAISQUER DANOS, INCLUINDO QUAISQUER LUCROS PERDIDOS, POUPANÇA PERDIDA, OU OUTROS DANOS INCIDENTAIS OU CONSEQUENTES DECORRENTES DO USO OU DA INCAPACIDADE DE USAR O SOFTWARE (MESMO QUE NÓS OU UM REVENDEDOR OU DISTRIBUIDOR AUTORIZADO TENHA SIDO AVISADO DA POSSIBILIDADE DESSES DANOS), OU PARA QUALQUER OUTRA PARTE.
ALGUNS ESTADOS NÃO PERMITEM A LIMITAÇÃO OU EXCLUSÃO DA RESPONSABILIDADE POR DANOS INCIDENTAIS OU CONSEQUENTES, DE MODO QUE A LIMITAÇÃO ACIMA PODE NÃO SE APLICAR A VOCÊ.
Prazo e Término
Este contrato de licença entra em vigor após o uso do software e permanece eficaz até o término. Você pode rescindi-lo a qualquer momento destruindo todas as cópias do Software e Documentação em sua posse. Ele também será rescindido automaticamente se você não cumprir qualquer termo ou condição deste contrato de licença. Você concorda com o término desta licença para destruir todas as cópias do Software e Documentação em sua posse.
Confidencialidade
O Software contém segredos comerciais e know-how proprietário que nos pertencem e está sendo disponibilizado a você em estrita confiança. QUALQUER USO OU DIVULGAÇÃO DO SOFTWARE, OU DE SEUS ALGORITMOS, PROTOCOLOS OU INTERFACES, EXCETO EM ESTRITA CONFORMIDADE COM ESTE CONTRATO DE LICENÇA, PODE SER ACIONÁVEL COMO UMA VIOLAÇÃO DE NOSSOS DIREITOS SECRETOS COMERCIAIS.
Disposições Gerais
1. Este contrato de licença por escrito é o contrato de exclusividade entre você e nós relativos ao Software e Documentação e substitui qualquer ordem de compra prévia, comunicação, publicidade ou representação relativa ao Software.
2. Este contrato de licença só pode ser modificado por uma escrita assinada por você e por nós.
3. No caso de litígio entre você e nós relativos ao Software ou Documentação, a parte vigente no litígio terá direito a recuperar honorários advocatícios e despesas da outra parte.
4. Este contrato de licença é regido pelas leis do Estado da Califórnia.
5. Você concorda que o Software não será enviado, transferido ou exportado para qualquer país ou usado de qualquer forma proibida pela Lei de Administração de Exportação dos Estados Unidos ou quaisquer outras leis, restrições ou regulamentos de exportação.
