Description:
Junte-se à Digiage e lidere tecnicamente uma das migrações de dados mais estratégicas do momento: a saída de Azure Synapse para Databricks/AWS em um projeto de grande escala.
Na Digiage, acreditamos que dados bem arquitetados são a base de qualquer decisão de negócio confiável — e que a liderança técnica certa faz a diferença entre uma migração arriscada e uma migração bem-sucedida.
Estamos em busca de uma pessoa Engenheira de Dados Sênior para atuar como referência técnica em um projeto de migração de Data Lake, liderando a construção do framework de migração, a definição da arquitetura de pipelines em Databricks e a estruturação da esteira de CI/CD, além de apoiar diretamente o time pleno e júnior ao longo de todo o projeto.
Responsabilidades e atribuições:
-
Liderar tecnicamente a fase de migração do framework e a definição da arquitetura de pipelines em Databricks
- Estruturar e validar a esteira de CI/CD do projeto, em paralelo à migração
- Definir padrões de engenharia (code review, testes automatizados, observabilidade) para todo o time
- Atuar como ponto de escalonamento técnico para problemas complexos de performance, qualidade de dados e arquitetura
- Conduzir decisões de priorização técnica junto ao arquiteto de solução e ao gerente de projeto
- Mentorar e revisar entregas de engenheiros pleno e júnior
- Interagir diretamente com stakeholders técnicos do cliente quando necessário
-
Requirements:
- Experiência com engenharia de dados, com atuação relevante em projetos de grande escala
- Experiência sólida com Databricks (Delta Lake, Workflows, Unity Catalog) e Apache Spark
- Experiência prática em pelo menos uma migração de Data Warehouse/Data Lake entre plataformas
- Experiência estruturando esteiras de CI/CD para times de dados (Git, testes automatizados, deploy)
- Forte capacidade de liderança técnica e comunicação com stakeholders
Diferenciais:
-
Experiência prévia migrando especificamente de Azure Synapse Analytics para Databricks
- Conhecimento aprofundado na stack Azure Synapse Analytics (dedicated SQL pools/T-SQL), Azure Data Factory e Azure Data Lake Storage Gen2
- Certificações Databricks (ex.: Data Engineer Professional, Solutions Architect)
- Uso e liderança de práticas de aceleração de migração com IA generativa (tradução/conversão de código, testes de paridade origem-destino, documentação assistida) e vivência em consultoria com cliente externo