Develop scripts and automations in Python / PySpark / SQL to modernize legacy processes, reducing manual effort and increasing traceability.
Develop end-to-end Machine Learning models: scoping, exploration, feature creation, model selection/evaluation/interpretation, production deployment, monitoring, and retraining.
Work with large volumes of data in distributed environments (Spark), focusing on performance and data quality.
Job description
Responsabilidades
Desenvolver scripts e automações em Python / PySpark / SQL para modernizar processos legados (gestão de bases, regras e motor de alertas), reduzindo esforço manual e aumentando rastreabilidade.
Desenvolver modelos de Machine Learning end-to-end: scoping, exploração, criação de features, seleção /avaliação / interpretação de modelos, deploy em produção, monitoramento e retreinamento.
Trabalhar com grandes volumes de dados em ambientes distribuídos (Spark), com foco em performance e qualidade de dados.