Logo for Ci&T

[Job - 29379] Senior Data Developer (IA/ AWS), Brazil

Roles & Responsibilities

  • Solid knowledge in Python and practical experience with PySpark
  • Cloud experience with AWS (S3, Glue, EC2, Lambda, Athena)
  • Automation of unit tests
  • Database management and best coding practices

Requirements:

  • Develop and evolve applications for data ingestion using AWS tools
  • Participate in technical understanding, inceptions, and refinements
  • Structure automated tests for quality assurance
  • Manage incidents and optimize data jobs and pipelines

Job description

Somos especialistas em transformação tecnológica, unindo expertise humana à IA para criar soluções tech escaláveis. Com mais de 8,000 CI&Ters ao redor do mundo, já formamos parcerias com mais de 1,000 clientes durante nossos 30 anos de história. Inteligência Artificial é nossa realidade.

Importante: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.

Estamos em busca de uma pessoa para atuar como Engenheiro(a) de Dados, integrando nosso time e contribuindo na construção de soluções escaláveis e inteligentes para grandes volumes de dados.

Se você é apaixonado por dados, tem experiência sólida com AWS e modelagem de dados, gosta de resolver problemas complexos e colaborar com equipes multidisciplinares, essa vaga é para você!

Responsabilidades:

- Atuar no desenvolvimento e evolução de aplicações para ingestão de dados utilizando ferramentas AWS, tanto em arquitetura serveless (glue, lambda, sns, sqs, kafka, etc) quanto com arquiteturas que usam ECS;
- Realizar o entendimento das necessidades técnicas, participando de inceptions e refinamentos;
- Codificar e estruturar testes automatizados para garantia de qualidade dos entregáveis;
- Realizar code review e Deploy em produção;
- Gestão de Incidentes;
- Otimizar jobs e pipelines de dados, atuando em particionamento de dados, balanceamento de dados (skew) e tuning de performance;
- Projetar e manter orquestrações de pipelines utilizando AWS Step Functions e AWS EventBridge;
- Configurar e acompanhar monitoria/observabilidade;
- Atuar com foco em FinOps, garantindo uso eficiente de recursos na nuvem e buscando oportunidades de otimização de custo nas soluções de dados.

Requisitos para este desafio:

- Uso de IA generativa, agents e skills para agilizar o trabalho
- Sólidos conhecimentos em Python e Experiência prática com PySpark;
- Cloud com AWS (S3, glue, EC2, lambda, athena);
- Automação de testes unitários;
- Banco de dados Relacional;
- Desenvolvimento de testes automatizados usando a estratégia de pirâmide de testes;
- Refinamento técnico de histórias e de solução;
- Qualidade de código e boas práticas de programação;
- Comunicação para garantir o alinhamento com time e stakeholers;
- Capacidade de execução e proatividade.
- Otimização de custos em nuvem e boas práticas de FinOps aplicadas a pipelines de dados.

Diferenciais:

- Uso de IA generativa, agents e skills para agilizar o trabalho
- Localstack com recursos AWS (infraestrutura as a code);
- Arquitetura Serveless;
- Datadog;
- Mensageria (Kafka, SQS, SNS);

 

 
#LI-DR3
Nossos benefícios:

- Plano de saúde e odontológico;
- Vale alimentação e refeição;
- Auxílio-creche;
- Licença parental estendida;
- Parceria com academias e profissionais de saúde e bem-estar via Wellhub (Gympass)  TotalPass;
- Participação nos Lucros e Resultados (PLR);
- Seguro de Vida;
- Plataforma de aprendizagem contínua (CI&T University);
- Clube de descontos;
- Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar;
- Curso gestante e parentalidade responsável;
- Parceria com plataformas de cursos online;
- Plataforma para aprendizagem de idiomas;
- E muitos outros

Mais detalhes sobre os nossos benefícios aqui: https://ciandt.com/br/pt-br/carreiras

Na CI&T, a inclusão começa no primeiro contato. Se você é pessoa com deficiência, é importante apresentar o seu laudo durante o processo seletivo. Consulte quais dados são necessários conter no laudo clicando aqui. Assim, podemos garantir o suporte e as adaptações que você merece. Se ainda não tem o laudo caracterizador, não se preocupe: podemos te apoiar para obtê-lo.

Temos um time dedicado de Saúde e Bem-estar, especialistas em inclusão e grupos de afinidade que estarão com você em todas as etapas. Conte com a gente para fazer essa jornada lado a lado.

Data Engineer Related jobs

Other jobs at Ci&T

We help you get seen. Not ignored.

We help you get seen faster — by the right people.

🚀

Auto-Apply

We apply for you — automatically and instantly.

Save time, skip forms, and stay on top of every opportunity. Because you can't get seen if you're not in the race.

AI Match Feedback

Know your real match before you apply.

Get a detailed AI assessment of your profile against each job posting. Because getting seen starts with passing the filters.

Upgrade to Premium. Apply smarter and get noticed.

Upgrade to Premium

Join thousands of professionals who got noticed and hired faster.