[Job24160] Senior Data engineer (Especialidade em Apache Spark), Brasil

Work set-up: 
Full Remote
Contract: 
Experience: 
Senior (5-10 years)
Work from: 

Offer summary

Qualifications:

Experiência sólida em desenvolvimento Java e engenharia de dados., Prática com Apache Spark, ETL e análise de dados distribuídos., Conhecimento em bancos de dados relacionais e não-relacionais., Familiaridade com ferramentas de orquestração de dados como Apache Airflow..

Key responsibilities:

  • Desenvolver e otimizar pipelines de dados usando Apache Spark.
  • Contribuir para soluções inovadoras em engenharia de dados na transformação digital.
  • Colaborar com equipes multidisciplinares para integrar e manipular dados.
  • Liderar melhorias nos processos de engenharia de dados e orientar desenvolvedores juniores.

Ci&T logo
Ci&T
5001 - 10000 Employees
See all jobs

Job description

Somos especialistas em transformação tecnológica, unindo expertise humana à IA para criar soluções tech escaláveis. Com mais de 7.400 CI&Ters ao redor do mundo, já formamos parcerias com mais de 1.000 clientes durante nossos 30 anos de história. Inteligência Artificial é nossa realidade.

Importante: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.

Responsabilidades:
Atuar como protagonista na transformação digital da empresa, contribuindo para a construção de soluções inovadoras em engenharia de dados em um ambiente colaborativo.
Desenvolver e otimizar pipelines de dados utilizando Apache Spark, assegurando a eficiência no processamento e análise de grandes volumes de dados.
Colaborar com equipes multidisciplinares para projetar, implementar e manter soluções de integração e manipulação de dados que impactem positivamente o negócio.
Aplicar boas práticas de desenvolvimento de software, assegurando a qualidade, escalabilidade e manutenibilidade dos sistemas.
Liderar iniciativas de melhoria contínua nos processos de engenharia de dados, orientando desenvolvedores juniores e promovendo uma cultura de aprendizado e excelência técnica.
Realizar a coleta, transformação e análise de dados, garantindo a integridade e qualidade da informação.
Manter e aprimorar continuamente os sistemas de dados existentes, buscando inovações e atualizações tecnológicas.

Requisitos:

Sólida experiência em desenvolvimento Java, com forte compreensão dos fundamentos de engenharia de dados.
Experiência prática em Apache Spark, incluindo o desenvolvimento de trabalhos de ETL e análise de dados distribuídos.
Conhecimento em bancos de dados relacionais e nãorelacionais, bem como em ferramentas de gerenciamento de dados.
Familiaridade com ferramentas de orquestração de dados, como Apache Airflow ou similar.
Experiência com integração de APIs REST para consumo de dados externos.
Compreensão de arquiteturas de dados em nuvem, preferencialmente em ambientes AWS ou Azure.
Habilidade em trabalhar com equipes ágeis e metodologias ScrumKanban.
Familiaridade com ferramentas de controle de versão, como Git e GitHub.

Diferenciais:
Conhecimento em containers e orquestração, como Docker e Kubernetes.
Experiência em framework de testes automatizados, como JUnit ou Mockito.
Compreensão e aplicação de princípios de arquitetura como Data Lake e Data Warehouse.
Conhecimento em cloud OCI (Oracle).
Desejável conhecimento em práticas de Ciência de Dados e Machine Learning.
Desejável familiaridade com ferramentas de visualização de dados (ex: Tableau, Power BI).




#LIRB2
#Midsenior



Nossos benefícios:

Plano de saúde e odontológico;
Vale alimentação e refeição;
Auxíliocreche;
Licença parental estendida;
Parceria com academias e profissionais de saúde e bemestar via Wellhub (Gympass) TotalPass;
Participação nos Lucros e Resultados (PLR);
Seguro de Vida;
Plataforma de aprendizagem contínua (CI&T University);
Clube de descontos;
Plataforma online gratuita dedicada à promoção da saúde física, mental e bemestar;

Required profile

Experience

Level of experience: Senior (5-10 years)
Spoken language(s):
Portuguese
Check out the description to know which languages are mandatory.

Other Skills

  • Collaboration

Data Engineer Related jobs