About this role
O que buscamos Buscamos um(a) profissional sênior de Qualidade de Software (QA) com experiência em testes de aplicações tradicionais e soluções de Inteligência Artificial Generativa. O perfil atuará na definição de estratégias de testes, automação, validação de modelos baseados em LLMs, pipelines RAG e plataformas financeiras, garantindo qualidade, confiabilidade, segurança e performance das soluções.
Responsabilidades
- Atuar com o planejamento e execução de estratégias de testes funcionais, integrados, regressivos e de performance; Projetar e executar testes de aplicações baseadas em Inteligência Artificial e modelos de linguagem (LLMs); Avaliar a qualidade de respostas geradas por IA considerando critérios de precisão, coerência, tom, segurança e viés; Desenvolver e manter frameworks e suítes de testes automatizados; Validar soluções integradas a pipelines RAG, bases de conhecimento e bancos vetoriais; Executar testes de APIs, serviços backend e integrações entre sistemas; Identificar riscos, falhas e cenários de borda relacionados ao comportamento dos modelos de IA; Atuar com validações de integridade, reconciliação e qualidade de dados; Coordenar testes de regressão relacionados a releases, correções e mudanças de infraestrutura; Colaborar com equipes de desenvolvimento, produto e análise de negócios para garantir a testabilidade das soluções; Conduzir análises e priorização de defeitos com base no impacto para o negócio; Monitorar indicadores de qualidade, cobertura de testes e automação; Elaborar relatórios executivos e recomendações de melhoria contínua; Apoiar investigações de incidentes em produção e análises de causa raiz; Mentorar profissionais da equipe e promover boas práticas de qualidade de software; Requisitos e Qualificações Experiência sólida em Qualidade de Software (QA) ou Quality Engineering; Experiência em posições sêniores ou de liderança técnica em QA; Inglês avançado ou fluente para comunicação diária; Conhecimento de estratégias de testes funcionais, integração, regressão e performance; Experiência com automação de testes utilizando Selenium, Playwright, Robot Framework ou ferramentas similares; Conhecimento em desenvolvimento utilizando Java e Python; Experiência com automação e validação de APIs; Conhecimento em consultas a bancos de dados, validação e reconciliação de dados; Experiência com pipelines CI/CD e ferramentas como Jenkins, GitHub ou similares; Conhecimento da arquitetura e comportamento de Large Language Models (LLMs); Experiência com Prompt Engineering e avaliação de respostas geradas por IA; Conhecimento em LangChain e/ou LangGraph; Experiência com pipelines RAG (Retrieval-Augmented Generation); Conhecimento em bancos de dados vetoriais e buscas por similaridade; Conhecimento em protocolos de integração e testes de ferramentas conectadas via MCP; Conhecimento de metodologias de testes de segurança, viés e validação de sistemas de IA.
- Diferenciais Experiência no segmento de securitização, mercado de capitais ou ativos financeiros; Vivência com testes em plataformas financeiras complexas; Conhecimento avançado em embeddings, tokenização, mecanismos de atenção e inferência de LLMs; Experiência com testes de soluções agentic (AI Agents); Conhecimento em monitoramento da qualidade de modelos de IA em escala; Vivência com liderança técnica e desenvolvimento de times de QA; Experiência com ferramentas de IA e Machine Learning aplicadas à automação de testes.