Desenvolvedor(a) Sênior em Web Scraping e Ia para Automação de Dado...

Buscamos um(a) Desenvolvedor(a) Sênior em web scraping, integrações e ia para liderar a coleta, estruturação e automação de dados de múltiplas plataformas e sites do mercado imobiliário, com entrega direta em um crm. O profissional será responsável por desenvolver robôs de scraping robustos e escaláveis para extrair informações de 8 grandes plataformas (como QuintoAndar, Buskasa, Chaves na Mão, zap imoveis, viva real, kenlo, olx imovelweb) e expandir para até 100 sites e redes, garantindo qualidade, padronização e atualização constante dos dados.

Além do scraping, a função inclui tratamento e enriquecimento dos dados com IA, realizando limpeza, normalização, deduplicação, classificação de anúncios, geração de descrições, extração de atributos e criação de scoring de oportunidades. Todo o fluxo deverá ser integrado ao CRM por meio de APIs oficiais, webhooks e rotinas automatizadas, formando um pipeline contínuo de captação, processamento e cadastro de imóveis, com logs, monitoramento e documentação.

O escopo também envolve contornar mudanças de layout, gerenciar cookies, headers e sessões, utilizar proxies dentro do permitido, criar filas e agendamentos, armazenar dados em banco e manter versionamento e métricas de desempenho.

Requisitos: experiência sênior comprovada em scraping em larga escala; domínio de Python (Scrapy, BeautifulSoup, Selenium ou Playwright); manipulação de html, css e javascript; experiência com bancos de dados, apis, autenticação, versionamento em git e boas práticas de arquitetura. Diferenciais: integração com CRM, automações (n8n, Make, Zapier), cloud, Docker e uso prático de IA para tratamento e classificação de dados. Buscamos um profissional autônomo, organizado e orientado a resultados, capaz de construir um sistema escalável e bem documentado

Category: IT & Programming Subcategory: Web development What is the scope of the project?: Create a new custom site