JOB DESCRIPTION
O que vamos construir juntos?
Nosso time é preocupado em propor as melhores soluções baseado em excelência técnica, pensando em alternativas que agreguem valor, com mindset ágil e cultura de colaboração. Nós respeitamos a diversidade e acreditamos que times diversos contribuem para construir ideias mais inovadoras.
RESPONSIBILITIES AND ASSIGNMENTS
- Definir e documentar arquiteturas de dados end-to-end, desde a ingestão de fontes até a camada de consumo analítico, garantindo escalabilidade, performance e governança;
- Estabelecer padrões técnicos, diretrizes de desenvolvimento e decisões arquiteturais, promovendo consistência entre projetos e times;
- Conduzir a adoção e evolução da arquitetura Lakehouse (Medallion Architecture) em ambientes Databricks e Azure, incluindo estratégias de particionamento, clustering e otimização de Delta Tables
- Definir e orientar estratégias de ingestão de dados batch, incremental, CDC e streaming;
- Liderar tecnicamente decisões de modelagem de dados adequadas ao contexto analítico e ao padrão de consumo;
- Garantir a implementação de práticas de governança de dados (catalogação, linhagem, controle de acesso por objeto/linha/coluna;
- Atuar de forma consultiva junto a clientes, conduzindo descobertas técnicas, levantamento de requisitos e apresentação de propostas arquiteturais;
- Apoiar e revisar o trabalho de engenheiros de dados, garantindo aderência aos padrões definidos e promovendo boas práticas de desenvolvimento;
- Colaborar com times de BI, Engenharia e IA na definição das camadas de dados que suportam modelos analíticos, semânticos e de ML;
- Avaliar e recomendar tecnologias, ferramentas e padrões de integração alinhados ao ecossistema Azure + Databricks;
- Monitorar a saúde das plataformas de dados (qualidade, SLAs, custos de computação e armazenamento) propondo melhorias contínuas;
- Contribuir para processos de pré-venda e qualificação técnica de oportunidades, elaborando arquiteturas de referência e estimativas de esforço.
REQUIREMENTS AND QUALIFICATIONS
Obrigatórios:
- Experiência sólida em arquitetura de soluções de dados na nuvem Azure (Data Factory, ADLS Gen2, Azure Synapse, Event Hub, Azure Functions);
- Vivência com arquitetura Lakehouse, camadas medalhão, Delta Lake e ingestão de dados;
- Experiência com Databricks (PySpark/SparkSQL, Spark Declarative Pipelines, Unity Catalog, Databricks Automation Bundles, Lakeflow Connect);
- Domínio de modelagem de dados adequada ao contexto analítico;
- Experiência com ingestão de dados em diferentes formatos (CDC, APIs, bancos de dados relacionais e não relacionais, etc) e frequências (batch, incremental, streaming, etc);
- Capacidade de definir e documentar padrões técnicos, diretrizes de desenvolvimento e decisões arquiteturais;
- Experiência com orquestração de pipelines e controle de qualidade de dados;
- Familiaridade com governança de dados (catálogo, linhagem, controle de acesso e segurança em diferentes níveis de objetos/dados);
- Capacidade de atuar de forma consultiva junto a clientes, traduzindo requisitos de negócio em arquiteturas técnicas.
Diferenciais:
- Vivência com Microsoft Fabric (Lakehouses, Warehouses, Mirroring, Direct Lake, pipelines e atalhos OneLake);
- Vivência com fluxos de desenvolvimento e produtificação de ML/AI/genAI;
- Experiência com espelhamento do Unity Catalog do Databricks no Fabric;
- Conhecimento em Power BI e camada semântica (modelos tabulares, AAS, Direct Lake);
- Experiência com streaming e ingestão em tempo real (Structured Streaming, Event Hub, Kafka);
- Familiaridade com infraestrutura como código e CI/CD para pipelines de dados (Databricks Automation Bundles, Azure DevOps);
- Experiência em projetos de migração de ambientes on-premises para cloud ou modernização de data warehouses legados;
- Certificações relevantes como Databricks Engineer Associate/Professional.
ADDITIONAL INFORMATION
Por aqui você terá:
- Vale iFood (alimentação e refeição);
- Ajuda de Custo;
- Plano de Saúde;
- Plano Odontológico;
- Day off de Aniversário;
- Seguro de Vida;
- Licença Maternidade e Paternidade estendida;
- Parcerias Educacionais;
- Parceria Total Pass - saúde e bem estar;
- Parceria Clude Saúde;
- Programas de Reembolso;
- Horário flexível;
- Dresscode: seja você.
Prazer, somos a DB!
Da garagem de casa para o mundo: assim começa a história da DB. Nascemos com desejo de mudança, nosso propósito é ser uma empresa de tecnologia centrada nas pessoas, com colaboração, inclusão e diversidade. Em 1993, iniciamos como consultores de um dos grandes bancos de dados da época, que nos deu o nome de DBServer (data base server) e aos poucos fomos construindo a DB (Design + Build the future) que você conhece hoje, a que gera mudança através de inovação e humanidade.
Nós desenvolvemos pessoas que impactam os negócios com tecnologia e inovação, participando de forma flexível e articulada em squads, consultorias e capacitações em todas as etapas do ciclo de vida, do Discovery ao Delivery e sustentação.
Um olhar para a Diversidade & Inclusão
A DB tem constituído uma jornada composta por marcadores culturais com profundo significado humano e que fazem parte do nosso dia a dia. Com coragem e empatia, colaboração, senso coletivo e de comunidade, estamos evoluindo na direção de uma cultura centrada nas pessoas.
Estamos orgulhosos de promover um ambiente de trabalho livre de discriminação. Acreditamos que a diversidade de experiências, perspectivas e histórico transforma nosso ambiente de trabalho. Estamos empenhados a construir esse legado com a sua parceria!
Conheça nosso Marco Ético: https://bit.ly/MarcoEtico
