Experience with data integration (ETL/ELT) across systems and designing/optimizing data pipelines
Strong knowledge of relational and NoSQL databases; proficient in Python and SQL for data manipulation; experience with REST/JSON APIs and service integrations
DevOps/CI-CD expertise including automated pipelines, unit/integration tests, static code analysis, SAST, and Infrastructure as Code (Terraform/CloudFormation) with advanced Git workflows
Hands-on AWS experience (Lambda, EC2, RDS, S3), IAM security, CloudWatch monitoring, cost optimization, and emphasis on data modeling and quality governance
Requirements:
Develop and maintain data integration processes (ETL/ELT), including ingestion, transformation, and provisioning of data from diverse sources.
Integrate systems via APIs and services; monitor data quality, integrity, and availability; identify and resolve issues in data flows.
Collaborate with data, development, and business teams; document processes, data flows, and integrations.
Implement automated tests (unit and integration), static code analysis, security (SAST), and promote data governance and best practices to deliver robust, production-ready solutions.
Job description
Este é um cargo remoto.
Desenvolver e manter processos de integração de dados (ETL/ELT);
Realizar ingestão, transformação e disponibilização de dados de diferentes fontes;
Integrar sistemas por meio de APIs e serviços;
Monitorar e garantir a qualidade, integridade e disponibilidade dos dados;
Atuar na identificação e resolução de problemas relacionados a fluxos de dados;
Trabalhar em conjunto com equipes de dados, desenvolvimento e negócio;
Documentar processos, fluxos e integrações realizadas;
Apoiar na definição de boas práticas e governança de dados.
O profissional deve ser capaz de implementar testes automatizados (unitários, integração, cobertura), análise estática de código, segurança (SAST) e boas práticas de qualidade, transformando o projeto em uma solução robusta, segura e pronta para produção.
Requisitos
Experiência com integração de dados entre sistemas (ETL/ELT);
Conhecimento em bancos de dados relacionais e não relacionais (SQL e NoSQL);
Domínio de linguagens como Python, SQL ou similares para manipulação de dados;
Experiência com APIs (REST/JSON) e integração de serviços;
Vivência com ferramentas de integração;
Conhecimento em modelagem de dados e qualidade de dados;
DevOps e CI/CD: Configuração de pipelines automatizados, testes contínuos, deploy seguro, Infrastructure as Code (Terraform/CloudFormation) e versionamento Git avançado;
Engenharia de Dados e Fluxos de Dados: Design e otimização de pipelines de dados, integração com LLMs e garantia de qualidade de dados;
Experiência com ambientes em nuvem AWS (Profundo conhecimento de serviços relevantes (Lambda, EC2, RDS, S3), segurança (IAM), monitoramento (CloudWatch) e otimização de custos);
Familiaridade com versionamento de código (Git);
Capacidade de análise, resolução de problemas e trabalho em equipe.
