Engenheiro de Dados Pleno

Missão:

Sua missão será atuar na linha de frente dos novos projetos de dados, garantindo a entrega de soluções de ponta a ponta, da ingestão à visualização final, assegurando que as novas demandas de negócio sejam atendidas com agilidade e precisão. Utilizando Databricks e dbt, você será o responsável por transformar necessidades de diversas áreas de negócio em ativos de dados precisos, assegurando que as novas demandas sejam atendidas com agilidade e excelência técnica.

Irá atuar em um de nossos maiores clientes do segmento financeiro. Integrando um ecossistema com desafios de alta complexidade técnica, operando em um ambiente dinâmico que exige soluções resilientes para grandes volumes de dados em infraestrutura Azure.

Conhecimentos necessários/requisitos essenciais:

• Experiência em Python, SQL, PySpark e, principalmente, DBT;
• Experiência com Delta Lake, Databricks e Unity Catalog;
• Vivência em infraestrutura Azure;
• Experiência com versionamento de código (Git) e processos de CI/CD (preferencialmente em Azure DevOps);
• Conhecimento sólido em arquitetura Lakehouse com design Medalhão.

Diferenciais desejáveis (não obrigatórios):

• Experiência prévia em instituições financeiras.
• LGPD e GDPR.

Responsabilidades:

• Desenvolvimento de Pipelines de Dados: Construir, otimizar e manter fluxos de dados escaláveis utilizando Python, SQL e PySpark, garantindo o processamento eficiente de grandes volumes de informação.
• Modelagem e Transformação com DBT: camada de transformação de dados utilizando dbt, aplicando regras de negócio e garantindo a qualidade, documentação e testabilidade do código de dados.
• Gestão do Ciclo de Vida do Dado (Medalhão): Estruturar e organizar os dados dentro da arquitetura Lakehouse, garantindo a transição fluida e governada entre as camadas Bronze, Silver e Gold.
• Governança e Segurança: Configurar e gerenciar permissões, linhagem de dados e catálogos através do Unity Catalog, assegurando conformidade com as normas.
• Atuação em Delta Lake: Garantir a confiabilidade e a performance do armazenamento utilizando Delta Lake.
• Cultura DevOps e Automação: Sustentar o ciclo de vida do desenvolvimento através de versionamento em Git e automação de deploys via esteiras de CI/CD (Azure DevOps), garantindo que as entregas em produção sejam seguras e rastreáveis.
• Colaboração: Apoiar o time promovendo as melhores práticas e trocando experiências.

O que você encontra aqui:

• Trabalho 100% remota (anywhere office).
• Avaliação de desempenho, plano de desenvolvimento individual, Programa Investindo em Você.
• Programa de saúde e bem-estar, plano de saúde e odontológico.
• Desafios gameficados e lojinha para comprar produtos com a sua pontuação.
• Day Off de Aniversário.
• Auxílio Equipamento/Home Office.
• Vale flexível para gastos diários.
• Programa de Indicação Premiada.
• Seguro de Vida.

Aviso de Privacidade - Recrutamento & Seleção: https://drive.google.com/file/d/1LV2tTa_PeSbyiXuqrG_6WJw0jrEqRxnA/view?usp=sharing