Data Engineering Lead | CatExpert.ai
Presencial em Campinas/SP, Brasil
Área: Global Analytics & Technology | S&D Analytics
Escopo: Global
Sobre a oportunidade
A equipe de S&D Analytics busca um(a) Data Engineering Lead para liderar a infraestrutura de dados do CatExpert.ai, plataforma global de Category Management da AB InBev, atualmente presente em mais de 15 mercados e em expansão contínua.
Esta posição terá papel fundamental na definição da estratégia e arquitetura de dados da plataforma, garantindo a entrega de soluções robustas, escaláveis e de alta qualidade que apoiam decisões de sortimento, espaço e planogramas para equipes de Category Management em todo o mundo.
O(a) profissional será responsável pela liderança de uma equipe global de Data Engineers, atuando em parceria com Product Managers, Data Scientists, especialistas em metodologia e stakeholders internacionais.
Principais responsabilidades
Arquitetura e Gestão da Plataforma de Dados
- Liderar a arquitetura de dados de ponta a ponta do CatExpert.ai, desde a ingestão até a disponibilização de dados para consumo analítico.
- Definir direcionamentos técnicos para soluções de engenharia de dados, automação e uso de ferramentas de Inteligência Artificial aplicadas ao desenvolvimento, como Databricks Genie, AgentBricks e GitHub Copilot Agentic Solutions.
- Projetar, desenvolver e manter pipelines escaláveis utilizando Azure Data Factory, Azure Databricks e Azure Synapse Analytics.
- Garantir desempenho, confiabilidade e eficiência operacional dos pipelines, monitorando indicadores como tempo de execução, taxa de falhas e consumo computacional.
- Desenvolver soluções capazes de suportar processamento em lote e em tempo real para grandes volumes de dados estruturados e não estruturados provenientes de diversos mercados.
- Assegurar que a arquitetura sustente o crescimento global da plataforma e o aumento da demanda de usuários e processamento.
Qualidade, Governança e Segurança de Dados
- Ser responsável pela qualidade, integridade e segurança dos dados utilizados pelo CatExpert.ai.
- Implementar processos de validação, correção e gerenciamento de dados mestres (Master Data Management).
- Definir e garantir a aplicação de políticas de governança, controle de acesso e conformidade com os padrões globais da companhia.
- Monitorar continuamente a saúde dos pipelines e atuar de forma proativa na prevenção e resolução de incidentes.
Liderança e Desenvolvimento de Equipe
- Liderar, desenvolver e orientar uma equipe composta por 4 Data Engineers, distribuídos entre Campinas e Bangalore.
- Promover excelência técnica por meio de revisões de código, boas práticas de engenharia de dados, versionamento, testes e automação.
- Fomentar uma cultura de protagonismo, colaboração, melhoria contínua e inovação.
- Garantir distribuição equilibrada das demandas e desenvolvimento constante dos membros da equipe.
Parceria com Negócio e Stakeholders
- Atuar como principal referência de Data Engineering para o CatExpert.ai.
- Trabalhar em parceria com Product Managers, Data Scientists e equipes de mercado para traduzir necessidades de negócio em soluções escaláveis.
- Apoiar a implementação da plataforma em novos mercados, assegurando que integrações, pipelines e padrões de qualidade estejam preparados antes do lançamento.
- Comunicar de forma clara e proativa o status dos projetos, riscos, dependências e oportunidades de melhoria.
Requisitos
Formação
- Graduação em Ciência da Computação, Engenharia, Tecnologia da Informação ou áreas correlatas.
- Pós-graduação ou mestrado serão considerados diferenciais.
Experiência Obrigatória
- Entre 7 e 10 anos de experiência em Engenharia de Dados.
- Experiência prévia em posições de liderança técnica ou gestão de equipes.
- Vivência sólida com os serviços Microsoft Azure:
- Azure Data Factory
- Azure Databricks
- Azure SQL Database
- Azure Data Lake Storage Gen2
- Azure Synapse Analytics
- Conhecimento avançado em SQL, PySpark e Python.
- Histórico comprovado na construção e sustentação de plataformas de dados e pipelines de alta escala em ambientes produtivos.
- Experiência com governança, qualidade e gestão de dados.
- Vivência na liderança de equipes distribuídas globalmente.
Diferenciais
- Experiência em empresas de bens de consumo, varejo ou FMCG.
- Conhecimento de dados de varejo, POS, Category Management, Space Planning ou Planogramas.
- Experiência com ferramentas de Inteligência Artificial aplicadas à Engenharia de Dados.
- Conhecimento em Apache Airflow ou ferramentas similares de orquestração.
- Experiência com Docker, Azure Kubernetes Service (AKS) e MLflow.
- Vivência na integração de pipelines de dados com APIs e soluções de Machine Learning.
Competências Técnicas
Essenciais
- Arquitetura e Engenharia de Dados em Azure.
- Desenvolvimento avançado em Python, PySpark e SQL.
- Modelagem de dados, Data Warehousing e processos ETL/ELT.
- Processamento de dados em lote e tempo real.
- Governança, qualidade e segurança de dados.
- Git, CI/CD, testes automatizados e boas práticas de desenvolvimento.
- Capacidade de resolver problemas complexos e construir soluções escaláveis.
Desejáveis
- Databricks Genie, AgentBricks e GitHub Copilot Agentic Solutions.
- Apache Airflow.
- Docker e AKS.
- MLflow e integração com modelos de Machine Learning.
Idiomas
- Inglês avançado ou fluente.
- Português ou Espanhol em nível intermediário.
Por que essa posição?
Esta é uma oportunidade para liderar um produto global estratégico da AB InBev, influenciando a evolução de uma plataforma utilizada por diversos mercados ao redor do mundo. O papel combina liderança de pessoas, definição de arquitetura de dados, inovação tecnológica e colaboração internacional, oferecendo alto nível de exposição e impacto nos resultados do negócio.
INFORMAÇÕES BENEFICIOS:
- 40 dias de home office;
- Vale refeição ou alimentação ifood;
- Vale transporte;
- Bônus;
- Plano de saúde e Telemedicina;
- Convênio odontológico;
- Convênio Farmácia;
- Seguro de vida;
- Instituto Ambev de Previdência Privada;
- Auxílio Material Escolar;
- Cesta de Natal e Kit Congelado;
- Brinquedos de Natal;
- Empresa cidadã (licença maternidade e paternidade) e presente do bebê;
- Desconto mensal em produtos AMBEV;
- Wellhub (Gympass);
- Fretado;
- Abono anual referente a um salário.