AI Jobs Map

Capco · Brazil - Sao Paulo

QA Engineer - COM INGLÊS

Posted 13 days ago
Apply on GreenhouseGreenhouseOpens the original posting. AI Jobs Map never asks for your details.

Stack mentioned

ci/cdsqlragcopilotazureopenaipython

SOBRE A CAPCO

A Capco é uma consultoria global de tecnologia e negócios, focada no setor de serviços financeiros e energia, somos apaixonados por ajudar nossos clientes, temos 40 escritórios nas Américas, Europa e Ásia-Pacífico! Se criatividade e inovação são sua paixão, a Capco é ideal para você. Vamos te apoiar e ajudar a acelerar sua carreira!

Buscamos uma pessoa QA Engineer para definir e executar estratégias de qualidade para soluções que envolvem dados, integrações e inteligência artificial.

Essa pessoa será responsável por estruturar processos e pacotes de testes desde o início, validando pipelines de dados, mecanismos de ingestão e reconciliação, conteúdos gerados por IA, agentes inteligentes e fluxos de trabalho habilitados por IA.

Principais responsabilidades

- Criar a estratégia de testes, os planos de qualidade e o pacote de testes do zero.

- Definir cenários, casos de teste, critérios de aceite e requisitos de rastreabilidade.

- Planejar e executar testes funcionais, de integração, regressão, desempenho e ponta a ponta.

- Validar sistemas responsáveis pela ingestão, transformação e reconciliação de dados provenientes de múltiplas fontes.

- Desenvolver cenários para tratamento de dados ausentes, incompletos, duplicados, inconsistentes ou inválidos.

- Avaliar a qualidade, integridade, completude, consistência e atualidade dos dados.

- Monitorar a saúde dos datasets e identificar anomalias, degradações e problemas de confiabilidade.

- Validar regras de negócio, mapeamentos, transformações e resultados de processos de reconciliação.

- Projetar testes para conteúdos gerados por IA, considerando precisão, relevância, consistência, segurança e aderência ao contexto.

- Testar agentes e fluxos de trabalho habilitados por IA, incluindo uso de ferramentas, memória, contexto, escalonamento e tratamento de exceções.

- Validar padrões de Human-in-the-Loop, como revisões, aprovações e intervenções humanas.

- Definir métricas de qualidade, limites de tolerância e critérios objetivos para aprovação de versões.

- Registrar, priorizar e acompanhar defeitos junto às equipes de engenharia, dados e produto.

- Criar relatórios de qualidade e comunicar riscos técnicos e impactos para o negócio.

- Contribuir para a automação de testes e sua integração aos pipelines de CI/CD.

Requisitos

- Experiência na criação de estratégias, planos e casos de teste para novos produtos ou plataformas.

- Conhecimento de metodologias, processos e técnicas de garantia da qualidade de software.

- Experiência com testes de pipelines, integrações, APIs e sistemas orientados a dados.

- Capacidade de escrever e executar consultas SQL para validação e análise de dados.

- Conhecimento de dimensões de qualidade de dados, como completude, precisão, consistência, unicidade, validade e atualidade.

- Experiência com testes de ingestão, transformação, mapeamento e reconciliação de dados.

- Conhecimento de tratamento de dados ausentes, incompletos, duplicados ou inconsistentes.

- Experiência na definição de métricas de qualidade e critérios de aceite mensuráveis.

- Capacidade de investigar falhas, identificar causas-raiz e comunicar riscos de forma clara.

- Boa colaboração com profissionais de engenharia, dados, produto e negócio.

- Inglês Avançado

Diferenciais

- Experiência com testes de aplicações baseadas em IA generativa e modelos de linguagem.

- Conhecimento de avaliação de conteúdos gerados por IA, incluindo groundedness, relevância, segurança, toxicidade e alucinações.

- Experiência com testes de agentes, copilotos, sistemas multiagentes ou soluções com RAG.

- Conhecimento de Microsoft Copilot Studio, Azure AI Foundry, Azure OpenAI ou tecnologias equivalentes.

- Experiência com Power Platform, Power Automate ou Microsoft Dataverse.

- Conhecimento de ferramentas de automação de testes de APIs, interfaces e pipelines de dados.

- Experiência com Python ou outra linguagem aplicada à automação e validação de dados.

- Familiaridade com frameworks de avaliação de modelos e aplicações de IA.

- Conhecimento de testes de segurança, privacidade, prompt injection e exposição indevida de dados.

- Experiência com observabilidade, monitoramento de qualidade e detecção de data drift.

- Conhecimento de práticas de CI/CD e integração de testes automatizados ao ciclo de desenvolvimento.

POR QUE CAPCO:

Na Capco promovemos uma cultura inclusiva. Valorizamos a diversidade em todas as suas expressões.
Pensamos, em conjunto, sempre em ações diversas de inclusão e de responsabilidade social através de comitês internos geridos pela nossa comunidade interna, como os grupo de Mulheres, Pessoas Com Deficiência, Pessoas Negras, LGBTQIAPN+, Parentalidade, Gerações, entre outros.
Nossas oportunidades são trabalhadas para todos(as)!!!
#LifeAtCapco

PRÓXIMOS PASSOS:

- Se você está ansioso(a) para progredir sua carreira conosco, candidate-se e aguarde o contato de um de nossos recrutadores!

More jobs at Capco