Engenheiro(a) de Dados

Sobre a posição:

Buscamos uma pessoa engenheira de dados com perfil de desenvolvedora Python, que goste de construir código bem estruturado, testável e pronto para produção, e não apenas de escrever consultas.

Na Datlo, você vai coletar, transformar e disponibilizar dados de fontes variadas (bancos, APIs, arquivos e a web) dentro de uma arquitetura medalhão no BigQuery. Esses dados viram ativos confiáveis para nossos produtos, análises e soluções de IA. Também vai participar da construção de soluções com LLMs aplicadas aos nossos dados.

Esperamos que você conduza com autonomia demandas de média/alta complexidade, desde o entendimento do problema de negócio até a entrega e o monitoramento. Decisões de maior impacto arquitetural ou financeiro são tomadas em conjunto com o time.

Responsabilidades:

• Desenvolver e manter pipelines de ingestão e transformação em Python, com código modular, versionado, testado e revisado.
• Construir rotinas de coleta e extração de dados da web (scrapers, crawlers e consumo de APIs), tratando paginação, bloqueios, mudanças de layout e volume.
• Estruturar os dados nas camadas bronze, silver e gold, com padrões consistentes de nomenclatura, qualidade, documentação e rastreabilidade.
• Desenvolver modelos analíticos com dbt e SQL no BigQuery.
• Definir estratégias de carga incremental e completa, tratando idempotência, duplicidade e reprocessamento.
• Orquestrar e monitorar pipelines (Prefect), com alertas e tratamento de falhas.
• Implementar testes de qualidade de dados (integridade, unicidade, completude e atualidade).
• Otimizar custo e desempenho de consultas, processamento e armazenamento no GCP.
• Preparar dados para soluções de IA e participar de aplicações com LLMs, embeddings e RAG, avaliando qualidade, custo e latência com critérios objetivos.
• Documentar pipelines, modelos, regras de negócio e decisões técnicas.

O que buscamos:

• 2 anos ou mais de experiência em Engenharia de Dados ou Desenvolvimento com foco em dados.
• Domínio de Python para pipelines, integrações e automações, com boas práticas de engenharia de software: organização de código, testes e tratamento de erros.
• Experiência com BigQuery e Google Cloud Platform.
• Experiência com dbt e modelagem de dados analíticos.
• Conhecimento de arquitetura medalhão (bronze/silver/gold) ou de organização de dados em camadas.
• SQL sólido para transformação e análise.
• Experiência com alguma ferramenta de orquestração (Prefect, Airflow ou equivalente).
• Git, code review e CI/CD.
• Interesse genuíno por IA, com uso prático de APIs de LLMs, engenharia de prompts ou ferramentas de IA no dia a dia de desenvolvimento.

Diferenciais:

• Experiência com web scraping, crawlers ou mineração de dados (ex.: Scrapy, Playwright, Selenium, BeautifulSoup).
• Experiência com Prefect.
• Embeddings, busca semântica, RAG, function/tool calling ou agentes.
• Desenvolvimento de APIs (ex.: FastAPI).
• Docker e noções de deploy em nuvem.
• Dados geográficos, análise espacial ou inteligência de mercado.
• Noções de machine learning e estatística aplicada.
• Certificações em GCP, dbt ou Engenharia de Dados.

Como trabalhamos:

• Entendemos o problema de negócio antes de construir o pipeline ou a solução.
• Investigamos causas, não só sintomas, e comunicamos riscos e problemas de qualidade com clareza.
• Questionamos requisitos quando vemos inconsistências ou alternativas melhores.
• Usamos IA com senso crítico e validamos o que ela produz.
• Equilibramos velocidade, qualidade técnica, custo e valor para o negócio.
• Compartilhamos conhecimento e atuamos de acordo com o Manifesto da Datlo.

Formação:

Graduação em Ciência da Computação, Engenharia, Sistemas de Informação, Ciência de Dados, Estatística, Matemática ou áreas relacionadas é desejável.

Nos primeiros meses, você vai:

• Conhecer nossa arquitetura medalhão, os principais pipelines, as fontes e as regras de negócio.
• Assumir a manutenção e a evolução de pipelines e modelos dbt de média complexidade.
• Contribuir com testes, documentação e observabilidade.
• Conhecer as iniciativas de IA existentes e apoiar uma primeira solução com LLMs, com critérios claros de avaliação.

O que você encontrará na Datlo:

Um time de Dados que trabalha de perto com Desenvolvimento, Plataforma, Produto e Negócio, resolvendo problemas reais de coleta de dados, inteligência de mercado e IA aplicada. Você terá espaço para ganhar autonomia e participar cada vez mais das decisões técnicas.

Oferecemos:

• Vale Alimentação/ refeição mensal no cartão Swile no valor fixo de R$600,00;
• Wellhub (gympass);
• Day-off no mês do aniversário;
• Day-off no aniversário de empresa;
• Seguro de vida;
• Parceria com a Open English;
• Convênio com SESC
• Presentes de longevidade de empresa;
• Plano de Saúde Unimed com mensalidade 100% paga pela empresa e coparticipativo somente em consultas e exames;
• Plano Odontológico sem coparticipação.