Engenheiro(a) de dados Sr

O SPC Brasil é uma organização de Gestão e Inteligência de Dados, oferecemos soluções a consumidores e empresários com o objetivo de facilitar a realização de negócios por meio de dados inteligentes e tecnologia.O nosso objetivo é não apenas ser o maior banco de dados da América Latina, mas a principal plataforma integradora de informação e inteligência de dados, capaz de impulsionar e transformar toda a economia e a sociedade.Priorizamos a inclusão de pessoas em nossos times, buscamos pessoas, independente de cor, gênero, raça, credo ou deficiência. Todos são bem vindos em nosso processo seletivo!

Responsabilidades e atribuiçõesSuportar as integrações de dados já implantadas, garantindo a continuidade e eficiência dos processos.Apoiar a área de negócios na definição e implementação de soluções de dados que atendam às suas necessidades.Desenvolver e manter pipelines de ingestão de dados utilizando Aws, Databricks e Cloudera.Implementar e otimizar processos de processamento distribuído de dados com Spark, utilizando Scala e Python.Realizar consultas e manipulações de dados em Athena, Hive e MongoDB.Utilizar serviços da AWS para armazenamento, processamento e análise de dados.Desenvolvimento de pipelines no DatabricksRequisitos e qualificaçõesSuperior Linguagem de programação Python e Scala (Spark);Conhecimento de ferramentas e boas práticas de engenharia de dados (Ingestão de dados, Transformação e armazenamento);Experiência em ferramentas de IA Claude code e Git Copilot;Conhecimento em banco de dados relacionais (SQL, Oracle e NoSql);Conhecimento em arquitetura Cloud (AWS);Conhecimento em arquitetura Databricks;Orquestração de pipelines Airflow;Ferramentas ETL ou ELT(Apache Nifi);Conceitos de BI.Desejável conhecimento de prática de desenvolvimento seguro.Informações adicionais✨ Modelo híbrido e jornada flexível💳 Flash Benefícios + auxílio teletrabalho🩺 Plano de Saúde SulAmerica e Médica do trabalho e Plano Odontológico SulAmérica🛡️ Seguro de Vida🏋️ TotalPass🤝 C4 Life: apoio psicológico, financeiro e social com especialistas💰 PLR (Participação nos Resultados) 💍 Premiação casamento👶 Auxílio-creche e 🍼 Kit SPC Baby🎂 Day Off de aniversário🏖️ Convênio SESC🎓 Parcerias educacionais📲 SPC Avisa – monitoramento do CPF 24h🔐 Certificado Digital SPC BrasilQuer saber mais?☑️http://www.spcbrasil.com.br☑️https://www.linkedin.com/company/spcbrasil/☑️https://www.youtube.com/user/spcbrasilcomunica#VERMSERTUDOISSO