Engenheiro de Dados

Sobre a Função:

Estamos em busca de um(a) Engenheiro(a) de Dados altamente qualificado(a) para se juntar à equipe dinâmica do Empregos.com.br. Como um dos portais de empregos mais tradicionais e influentes do Brasil, oferecemos uma oportunidade única para contribuir significativamente na transformação de dados em insights valiosos. **

Responsabilidades Principais:**

• Arquitetura e Governança de Dados:
• Planejamento de infraestrutura de dados, incluindo armazenamento, processamento e fluxo de dados.
• Desenvolvimento de estratégias de governança de dados, estabelecendo políticas, padrões e práticas.
• Colaboração interdepartamental para garantir a conformidade e segurança dos dados.
• Desenvolvimento de Estruturas e Pipelines:
• Integração de dados de diversas fontes através de processos ETL.
• Construção e manutenção de estruturas de data pipeline com performance otimizada.
• Construção de infraestrutura para extração, transformação e carga de dados de diversas fontes.
• Automatização de processos manuais, otimização de data deliveries e redesenho da infraestrutura para melhor performance.
• Qualidade e Consistência dos Dados:
• Implementação de sistemas e rotinas para monitorar e garantir a qualidade e consistência das bases de dados.
• Atuação como Quality Assurance em entregas de estruturas desenvolvidas por outros membros da equipe no que diz respeito a ETLs, procedimentos e entregas técnicas de dados.
• Implementação de data quality rules e desenvolvimento de governança de dados.
• Colaboração e Documentação:
• Colaboração com stakeholders executivos, de produtos e outras áreas para fornecer infraestrutura de dados alinhada com suas necessidades.
• Documentação dos procedimentos e fluxos de dados da área.
• Estruturação e Modelagem de Dados:
• Modelagem de dados para representar com precisão as informações da empresa.
• Desenvolvimento de modelos lógicos e físicos, garantindo a integridade e segurança dos dados.
• Colaboração com equipes de BI e Analytics na criação de modelos dimensionais otimizados e reutilizáveis.
• Ferramentas e Tecnologias:
• Construção de ferramentas analíticas para tratamento de dados gerados pelos pipelines.
• Utilização de ferramentas como Databricks, Amplitude, Metabase, Airflow, Synapse, Python, PySpark.

Requisitos:

• Sólida experiência prévia em engenharia de dados.
• Domínio com bancos de dados relacionais e Não Relacionais.
• Habilidade em Python e principais Bibliotecas de ETL.
• Conhecimento em Cloud computing platforms (AWS, Azure, Google Cloud).
• Conhecimento avançado em Bigquery, Dataform e SQL.
• Familiaridade com Docker
• Experiência em Spark ou outros sistemas distribuídos de big data.
• Conhecimento em ferramentas como Airflow, Databricks.
• Experiência com o Google Cloud Provider (GCP), especialmente em Composer-Airflow.

Formação e Orientação Para Resultados:

• Bom conhecimento de sistemas de informação e ambientes de dados.
• Conhecimento de ferramentas de marketing, como CDP, Marketing Automation ou software CRM.
• Conhecimento de ferramentas digitais e plataformas (Facebook, Google Analytics, GTM).
• Familiaridade com sistemas de controle de versão, incluindo Git, Gitlab e Github.
• Experiência em arquitetura e mapeamento/modelagem de dados.
• Conhecimento em ferramentas de ETL, como Airflow e Databricks.

Formação e Orientação Para Resultados:

• Formação Superior Completa em Ciência da Computação, Análise de Sistema, Engenharia, Administração ou Estatística.
• Mínimo de 4 a 6 anos de experiência relevante, com pelo menos 2 anos em um cargo relacionado à gestão de dados.

Beneficios:

Formação Acadêmica:

Não informado **

Experiência:**

Salário:

0 **

Cargo:**

Engenheiro de Dados **

Empresa:**

Empregos.com.br

O site Empregos.com.br é um dos maiores portais de empregos e carreiras do Brasil, trabalhando para promover o encontro do candidato com a vaga ideal. **

Ramo:**

Recursos Humanos/ Recrutamento e seleção

(BD)