EasySpider

Sem escrever uma linha de código, o EasySpider cria tarefas de coleta de dados na web. Você abre a página dentro do programa, clica com o botão direito no bloco que interessa e ele encontra os itens parecidos. O sistema saiu de pesquisa na Universidade de Zhejiang e virou artigo na The Web Conference (WWW) de 2023.

Para que serve

• Percorrer uma lista de produtos, abrir cada página de detalhe e seguir para a próxima página.
• Ler captchas de texto com OCR e salvar capturas de tela de páginas ou elementos.
• Agendar tarefas e rodar várias em paralelo, com troca de IP por um pool de proxies.
• Gravar o resultado direto num banco MySQL.
• Executar uma tarefa pronta pela linha de comando, dentro de outro sistema.

Como começar

Baixe a versão mais recente na página de Releases do repositório; o site oficial cita Windows, macOS e Linux. Desenhe a tarefa na interface, que mostra o fluxo como fluxograma, e rode. Quem quiser compilar do código-fonte tem um guia baseado no Ubuntu 24.04. O README proíbe o uso em atividade ilegal, como coletar sites de governo ou militares, e põe a responsabilidade no usuário. Colete só o que o site permite: leia os termos de uso e o robots.txt, e trate qualquer dado pessoal conforme a LGPD.

Licença e custo

O README declara o EasySpider gratuito também para empresas, inclusive em uso comercial e desenvolvimento derivado, sob a AGPL-3.0. As obrigações começam quando você mexe no código: uma versão modificada distribuída a outras pessoas sai em AGPL-3.0 com o código-fonte, e o mesmo vale se você a oferecer a usuários pela rede. O site diz que todos os recursos são gratuitos e sem anúncios. Um único autor mantém o projeto com doações.

Quando vale a pena

Analistas de marketing e de inteligência competitiva que acompanham preços e catálogos de concorrentes, sem programador por perto, conseguem montar as tarefas sozinhos. Quando o site oferece API oficial, ela costuma ser o caminho mais estável. Para quem programa em Python, Scrapling e Crawl4AI dão mais controle.