Match score not available

Engenheiro de Dados PL

Remote:

Full Remote

Contract:

Full time

Work from:

Brazil

Offer summary

Qualifications:

Proficiency in Python with Pandas and Boto3, Experience with Scala, Spark, and SBT, Familiarity with AWS: Glue, Athena, and Lambda, Knowledge of data modeling and Terraform, Version control using Git.

Key responsabilities:

Develop and maintain data pipelines
Implement ETL processes with AWS tools
Collaborate with stakeholders on data needs
Monitor and optimize data system performance
Document processes and solutions

Stefanini Brasil XLarge https://www.stefanini.com.br

10001 Employees

See more Stefanini Brasil offers

Job description

JOB DESCRIPTION

Somos a maior multinacional brasileira e estamos entre as 100 maiores empresas de TI do mundo.

Estamos presentes em 41 países com +30k colaboradores. A Stefanini tem como principal objetivo auxiliar os clientes a encontrar, por meio de soluções personalizadas, a maneira ideal para alcançar seus desafios, impulsionando a inovação digital.

E queremos mais!

RESPONSIBILITIES AND ASSIGNMENTS

O que esperamos que você realize:

O Engenheiro de Dados será responsável por desenvolver e manter pipelines de dados utilizando Python, Pandas e Boto3, além de implementar processos de ETL com AWS Glue e Lambda. Também deverá criar soluções de processamento em escala com Scala, Spark e SBT, otimizando o desempenho dos jobs. Será necessário modelar dados para atender às necessidades das equipes de análise e ciência de dados, colaborar com partes interessadas e utilizar Terraform para gerenciar a infraestrutura na AWS, incluindo serviços como Athena e LakeFormation. O profissional usará Git para controle de versão, participará de revisões de código e documentará processos e soluções desenvolvidas. Além disso, deverá monitorar e otimizar o desempenho dos sistemas de dados e acompanhar tendências na área. Habilidades opcionais incluem experiência com Databricks, conhecimento em Docker e familiaridade com GitLab CI.

REQUIREMENTS AND QUALIFICATIONS

Required Skills:

Python -> Pandas, Boto3
Scala -> Spark, SBT
Cloud -> AWS: Glue, Athena, Lakeformation (administrators), Lambda
Terraform -> AWS Provider
Data Modeling Knowledge
Git

Optional Skills:

Platform -> Databricks
Docker
gitlab ci

ADDITIONAL INFORMATION

O que te oferecemos:

🍛 Vale Alimentação ou Vale Refeição;

👨🏼‍🎓 Desconto em cursos, universidades e instituições de idiomas;

📚 Academia Stefanini - plataforma com cursos online, gratuitos, atualizados e com certificado;

🗣 Mentoring;

🏫 Auxílio Creche;

💉 Clube de vantagens para consultas e exames;

🏥 Assistência Médica;

🦷Assistência Odontológica;

💰 Clube de vantagens e descontos nos melhores estabelecimentos;

👂🏾 Atendimento psicológico online ao colaborador e seus dependentes;

🛫 Clube de viagens;

🐶 Convênio para Pet;

e muito mais...

WE ARE STEFANINI

Somos uma multinacional brasileira com mais de 30 anos de atuação no ecossistema de inovação.

Entregamos soluções eficazes que auxiliam os nossos clientes em suas jornadas digitais, sempre aplicando o nosso propósito de tornar a tecnologia um agente de mudança para um mundo melhor. Você quer transformar o futuro? A gente também. 🚀

7 pilares guiam a nossa cultura, são eles:

⭐ Inovar com o cliente;

⭐ Fazer a diferença;

⭐ Liderar pelo exemplo;

⭐ Agir como empreendedor;

⭐ Ser ético e de acordo com o que fala;

⭐ Acreditar e respeitar as pessoas;

⭐ Ter humildade em aprender.

Acreditamos que a verdadeira mudança só pode ser alcançada quando observamos o mundo por diferentes perspectivas, aqui a inovação floresce em uma atmosfera de respeito mútuo, em que as ideias são ouvidas e valorizadas independentemente de raça, cor, orientação sexual, ascendência, religião, gênero, nacionalidade, identidade de gênero, deficiência ou idade. 💙 #WeAreStefanini #OrgulhoDeSerStefanini #CarreiraStefanini

🏆 Prêmio Innovative Workplaces Brasil 2023 pela MIT Technology Review Brasil.