Match score not available

Engenheiro de Dados II

Remote: 
Full Remote
Contract: 
Work from: 

Offer summary

Qualifications:

Intermediate knowledge of ETL processes and data collection from various sources like SQL databases, APIs, and FTPs., Experience in data modeling (Relational, Dimensional - Star Schema and Snowflake)., Proficiency in Databricks and AWS stack (Glue, Lambda, S3, etc.)., Programming skills in Python, PySpark, SQL, and basic knowledge of R..

Key responsabilities:

  • Assist in building and implementing Data Warehouse and Datalake architectures.
  • Create and define data repository models and support data acquisition and processing pipelines.
  • Develop and maintain data ingestion, treatment, and security processes for various consumers.
  • Execute data migration from legacy systems to new solutions.

Meta logo
Meta https://www.meta.com.br/
1001 - 5000 Employees
See all jobs

Job description

O que procuramos?

Auxiliar na construção e implementações de arquiteturas com Data Warehouse e Datalake;

Criar e definir modelos de repositórios de dados;

Auxiliar na aquisição de dados, recuperação de informação, implementação de dutos de processamento e armazenamento;

Apoiar nas definições técnicas do ecossistema de Big Data;

Desenvolver e manter processos de ingestão, tratamento, controle/segurança e disponibilização de dados para diferentes consumidores levantando possíveis riscos de acordo com a aparência técnica pelas áreas de apoio emitidas;

Viabilizar testes de desempenho (desempenho);

Executar a migração de dados de sistemas legados para novas soluções.

Requisitos: Conhecimentos intermediários em processos de ETL (coleta de dados de fontes diversas, como bancos de dados SQL, API’s, FTP’s). Capacidade de abstrair regras de negócio para transformar em processos de ETL. Experiência em modelagem de dados (Relacional, Dimensional - Star Schema e Snowflake). Experiência utilizando Databricks (Delta Live Table, Unit Catalog, Change Data. Capture, Workflows, Databricks CLI, Databricks Asset Bundles (DABs). Conhecimento da stack da AWS (Glue, Lambda, Step Functions, S3, Event Bridge, CloudWatch, AWS CLI). Linguagem de programações: Python, PySpark, Spark, SQL, PL/SQL. Linguagem R (Nível Básico). Experiência utilizando GIT / Azure DevOps para gerenciamento de repositórios e atualização de ambientes. Conhecimentos na criação de recurso como código, utilizando Cloud Formation, Terraform ou ferramentas similares. Conhecimentos de VSCode. Conhecimentos básicos de Linux. Conhecimento de processos de carga CDC. Capacidade de transformar problemas de negócio em soluções completas. Contribuição com o time de dados para traduzir em soluções técnicas os diversos desafios de negócio apresentados. Conhecimentos básicos de Power BI

Diferenciais: Big Data: Spark (Python e Scala), SQL, Kafka, Hadoop, “Datalake”; Business Intelligence: Pentaho, Power Bi Microsoft, Tableau e Informática

Localidade da posição: São Paulo - SP. Porém, a vaga é 100% remota

Por que construir sua carreira na Meta?

Oferecemos autonomia, metas claras e um ambiente dinâmico e desafiador, onde os profissionais têm oportunidade de interagir com diferentes tecnologias, participar de todos os tipos de projetos, trazer novas ideias e trabalhar de qualquer lugar do Brasil e (por que não?) do mundo. Além disso, somos uma das melhores empresas para se trabalhar no Brasil segundo o Great Place to Work e uma das 10 empresas que mais crescem no país há 3 anos consecutivos, segundo o Anuário Informática Hoje.

Quais são nossos valores?

  • Somos pessoas servindo pessoas
  • Pensamos e agimos como donos
  • Temos gana por performance
  • Crescemos e aprendemos juntos
  • Buscamos excelência e a simplicidade
  • Temos inovação e criatividade no nosso DNA

Todas as pessoas são bem-vindas independentemente de sua condição, deficiência, etnia, crença religiosa, orientação sexual, aparência, idade ou afins. Queremos que você cresça conosco em um ambiente acolhedor e repleto de oportunidades.

Se identificou? Então, #VemSerMeta!

Required profile

Experience

Spoken language(s):
PortugueseEnglish
Check out the description to know which languages are mandatory.

Other Skills

  • Problem Solving

Related jobs