Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.
Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.
Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.
Este profissional terá um papel fundamental na garantia da precisão, segurança e qualidade das respostas dos agentes de IA. A posição exige equilíbrio entre profundidade técnica em modelos de linguagem, visão estratégica de qualidade conversacional e capacidade de traduzir requisitos de negócio em políticas de segurança auditáveis.
Responsibilities:
Qualidade e Avaliação de Modelos:
Realizar curadoria de datasets especializados para avaliação de qualidade de agentes conversacionais, utilizando técnicas como LLM-as-judge e frameworks de avaliação de IA generativa
Monitorar e otimizar métricas de qualidade conversacional, incluindo First Contact Resolution (FCR), taxas de fallback e precisão de respostas
Conduzir testes A/B de prompts e modelos de linguagem para melhoria contínua da experiência conversacional
Otimização de Pipelines de Voz e Texto:
Otimizar o pipeline de voz (Speech-to-Text e Text-to-Speech) ajustando modelos para sotaques e terminologias específicas do setor de telecomunicações
Calibrar modelos de transcrição e síntese para reduzir latência e melhorar a naturalidade das interações
Segurança Conversacional e Governança:
Definir e implementar políticas de segurança conversacional nos Guardrails, garantindo que as decisões automáticas dos agentes sejam auditáveis, éticas e alinhadas às diretrizes de negócio
Colaborar com equipes de governança para assegurar conformidade com regulamentações e melhores práticas de IA responsável
Engenharia de Prompt e Fine-tuning:
Desenvolver estratégias avançadas de prompt engineering para maximizar a precisão e a consistência das respostas dos modelos de linguagem
Realizar fine-tuning de modelos quando necessário para atender requisitos específicos de domínio e contexto de atendimento
Colaboração e Integração:
Trabalhar de forma integrada com desenvolvedores, engenheiros de dados e arquitetos para garantir que a camada de inteligência esteja alinhada com a arquitetura técnica da solução
Comunicar resultados técnicos e recomendações de forma clara para stakeholders de negócio e liderança do cliente
Requirements:
Sólida experiência como Cientista de Dados
Experiência comprovada com modelos de linguagem de grande escala (LLMs) e processamento de linguagem natural (NLP)
Domínio de técnicas de avaliação de modelos de IA generativa, incluindo frameworks como RAG, G-Eval ou equivalentes
Proficiência avançada em Python, incluindo bibliotecas como Pandas, NumPy e Scikit-learn
Sólida base em estatística e probabilidade aplicada a problemas de machine learning
Experiência prática com plataformas de cloud computing (AWS, GCP, Azure ou Oracle Cloud Infrastructure)
Capacidade de traduzir requisitos de negócio em soluções técnicas mensuráveis e auditáveis
Nice to Have:
Experiência com Oracle Cloud Infrastructure (OCI) e seus serviços de IA generativa
Conhecimento prático de pipelines de Speech-to-Text e Text-to-Speech, especialmente com Whisper ou tecnologias equivalentes
Experiência com fine-tuning de modelos de linguagem (Llama, Cohere, GPT ou similares)
Familiaridade com configuração de NeMo Guardrails ou frameworks equivalentes de segurança conversacional
Experiência prévia em projetos de voz, contact center ou atendimento automatizado
Vivência no setor de telecomunicações ou indústrias com alto volume de interações com clientes
BECU
Guidehouse
Astreya
Redhorse Corporation
Vianai Systems, Inc.
Ci&T
Ci&T
Ci&T
