Senior Data Engineer – Databricks

Resumo da oportunidade

A CI&T busca um(a) Senior Data Developer para atuar no desenvolvimento e na manutenção de pipelines de dados em Databricks, aplicando Arquitetura Medalhão.

O profissional irá liderar o design de pipelines robustos, integrar e transformar dados de diversas fontes e garantir a qualidade, confiabilidade, segurança e governança das informações, colaborando com equipes multifuncionais.

Principais atividades

• Desenvolver e manter pipelines de dados.
• Integrar dados de várias fontes, como APIs, bancos de dados relacionais e arquivos.
• Colaborar com equipes de negócios e análise para compreender os requisitos de dados.
• Garantir a qualidade, a confiabilidade, a segurança e a governança dos dados ingeridos.

Seguir práticas modernas de DataOps, incluindo controle de versão de código, testes de dados e CI/CD.

• Documentar processos e melhores práticas em engenharia de dados.
• Fornecer orientação técnica e mentorar pares.

Requisitos e qualificações

• Experiência comprovada na construção e no gerenciamento de pipelines de dados em larga escala no Databricks, utilizando PySpark, Delta Lake e SQL.
• Fortes habilidades de programação em Python e SQL para processamento e transformação de dados.
• Profundo entendimento de frameworks ETL/ELT, data warehousing e processamento de dados distribuídos.
• Experiência prática com práticas modernas de DataOps, como controle de versão com Git, pipelines de CI/CD, testes automatizados e infraestrutura como código.
• Familiaridade com plataformas em nuvem (AWS, Azure ou GCP) e serviços de dados relacionados.
• Fortes habilidades de resolução de problemas para solucionar questões de desempenho, escalabilidade e confiabilidade.
• Proficiência em Git.
• Inglês avançado essencial.

Diferenciais

• Experiência com contratos de dados, evolução de esquema e garantia de compatibilidade entre serviços.
• Expertise em frameworks de qualidade de dados, como Great Expectations, Soda, testes em dbt ou soluções personalizadas.
• Integração com Power BI.

Inscrição e candidatura

o UpVagas divulga esta oportunidade a partir da empresa ou plataforma de recrutamento. A candidatura é concluída na fonte original.

Sobre a empresa

A CI&T ajuda grandes empresas a transformarem o potencial da inteligência artificial em impacto real para os negócios, por meio de implantação de IA, execução nativa de IA e soluções de negócios integradas à tecnologia.

Com 30 anos de experiência em transformação tecnológica, a empresa acelera a inovação com expertise em Agentic SDLC, modernização de aplicações, dados e IA, martech e estratégia de negócios.

Conta com 8.000 colaboradores distribuídos em mais de 25 países, colaborando para construir soluções com impacto real.