Data Engineer Manager | Azure Databricks

Como Data Engineer Manager, você atuará em iniciativas estratégicas de modernização e migração de dados, contribuindo para a transformação digital de grandes organizações por meio de soluções modernas baseadas em Microsoft Azure e Azure Databricks.

Esta posição combina forte atuação técnica e hands-on, sendo responsável pelo desenvolvimento, migração e validação de ativos de dados, sempre garantindo qualidade, performance, governança e aderência às melhores práticas de engenharia de dados. Você trabalhará em estreita colaboração com Tech Leads, Arquitetos, Business Analysts e demais membros da squad para construir soluções robustas, escaláveis e orientadas ao negócio.

Faça parte de uma equipe apaixonada por dados, inovação e tecnologia, atuando em projetos de modernização que impulsionam resultados reais para nossos clientes. Na Avanade, você encontrará um ambiente colaborativo, desafiador e com oportunidades contínuas de crescimento profissional.

Together we do what matters.

Saiba mais sobre alguns de nossos benefícios:

• Vale refeição ou alimentação; 
• Cartão Multibenefícios até Consultor Sênior; 
• Convênio médico e odontológico; 
• Certificações e treinamentos; 
• Seguro de Vida; 
• Previdência Privada; 
• Avababy: acompanhamento da gestação e kit para os novos pais e mães Avanade; 
• Participação nos resultados da empresa;
• Wellhub; 
• Auxílio Creche; 
• Orientador de Carreira - Mentoria de carreira; 
• Política de Birthday Off em seu aniversário; 
• Sessões de Bem-Estar; 
• Para função gerencial ou superior - Veículo corporativo, estacionamento e auxílio combustível.
  ​

Responsabilidades:

• Desenvolver e migrar workloads de dados para Azure Databricks;
• Participar da modernização de scripts Python, processos de ingestão batch e rotinas ETL/ELT;
• Implementar pipelines de dados escaláveis e resilientes utilizando Apache Spark e Databricks;
• Realizar conversão e adequação de scripts legados para arquiteturas modernas de dados;
• Desenvolver transformações utilizando Python, SQL e Spark;
• Apoiar integrações com sistemas corporativos, APIs e bancos de dados relacionais;
• Participar da implementação de práticas de observabilidade, monitoramento e governança de dados;
• Contribuir para a modelagem de dados em arquiteturas Lakehouse utilizando Delta Lake;
• Executar testes unitários e integrados para validação dos ativos migrados;
• Apoiar atividades de homologação, estabilização e correção de defeitos;
• Garantir a qualidade, rastreabilidade e documentação das soluções desenvolvidas;
• Colaborar com equipes multidisciplinares em ambiente ágil;
• Seguir padrões definidos pela arquitetura e liderança técnica do projeto.

.

Habilidades e experiências

Requisitos obrigatórios

• Experiência em Engenharia de Dados e desenvolvimento de pipelines analíticos;
• Conhecimento em Azure Databricks;
• Experiência com Apache Spark para processamento distribuído;
• Domínio de Python e SQL;
• Experiência no desenvolvimento de processos ETL/ELT;
• Conhecimento em modelagem de dados para ambientes analíticos;
• Experiência com dados estruturados e semiestruturados;
• Conhecimento de Git e versionamento de código;
• Familiaridade com práticas de desenvolvimento em ambientes cloud;
• Experiência com consumo e integração de APIs;
• Conhecimento de bancos de dados relacionais e SQL avançado;
• Vivência em metodologias ágeis (Scrum, Kanban ou similares);
• Inglês avançado obrigatório (English required).
   

Diferenciais

• Experiência em projetos de migração de ambientes Hadoop ou Cloudera;
• Vivência no segmento financeiro, bancário ou fintech;
• Certificações Databricks;
• Certificações Microsoft Azure.

.