Logo for SysMap Solutions

Engenheiro de Dados SR (Integração SAP)

Role overview

Summary

This role focuses on the architecture, development, and implementation of advanced Data Engineering solutions at Grupo SysMap. You will work on integrating data from the SAP ecosystem and optimizing data pipelines, collaborating with teams in Architecture, BI, and Analytics to deliver impactful solutions.

Qualifications

  • Solid experience in Data Engineering, with involvement in architecture and processing of large data volumes.
  • Advanced and practical experience with Databricks, including development and optimization of data pipelines.
  • Proficiency in Apache Spark, PySpark, and Spark SQL.
  • Knowledge of Delta Lake, Delta Tables, and Lakehouse architecture.
  • Experience with the SAP ecosystem, especially SAP S/4HANA and/or SAP ECC.

Responsibilities

  • Design, develop, and maintain data pipelines using Databricks, ensuring efficiency and performance in processing large volumes of information.
  • Develop data ingestion, transformation, and processing processes using Apache Spark, PySpark, and SQL.
  • Implement Lakehouse and Medallion architectures, structuring data flows from ingestion to analytical consumption.
  • Work with Delta Lake, Delta Tables, and advanced Databricks features for data storage and management.

Key facts

Hard skills

Other skills

  • Collaboration
  • Problem Solving
  • Adaptability

About the company

SysMap Solutions logo

SysMap Solutions

  • IT Services & Consulting
  • 501–1,000
SysMap Solutions is a services company devoted to offering technological development to its customers since 1997. Nowadays, everyone is in contact with technology, but few have understood and mastered it like we have. Our know-how yields complex codes and systems which are carefully planned and developed in order to meet our clients' demands. What sets us apart is our experience. This is why entrusting our team with your project is a guarantee of excellent results. It's more than that: it is making sure that the final solution is the exact response to your needs. So count on us. After all, in the Age of Information, the most intelligent decision is having by your side those who have and share knowledge

Your match analysis

See how your profile stacks up against this role.

We compared the job requirements to your profile to show where you're strong and where you fall short.

Job description

JOB DESCRIPTION


Você é apaixonado(a) por tecnologia e inovação?

💡 No Grupo SysMap – que reúne SysMap Solutions, TriggoLabs e triggo.ai – acreditamos que grandes resultados nascem de pessoas incríveis.

Somos uma empresa brasileira de tecnologia que, desde 1999, ajuda organizações a superar desafios complexos e acelerar sua transformação digital.

Nossa atuação abrange diversos segmentos, como Telecom, Varejo, Educação, Financeiro, Indústria/Cosméticos e Energia, sempre com foco em soluções inovadoras e de alto impacto.

👉 Candidate-se agora e construa o futuro da tecnologia conosco!


RESPONSIBILITIES AND ASSIGNMENTS


Missão do Cargo

Atuar na arquitetura, no desenvolvimento e na implementação de soluções avançadas de Engenharia de Dados, com forte domínio em Databricks e integração de dados provenientes do ecossistema SAP. Será responsável por construir e otimizar pipelines de dados, implementar arquiteturas Lakehouse, desenvolver processos de ETL/ELT e garantir a qualidade, a escalabilidade, a governança e a disponibilidade das informações para ambientes analíticos e estratégicos.

Principais Responsabilidades

  • Projetar, desenvolver e manter pipelines de dados utilizando Databricks, garantindo eficiência, escalabilidade e performance no processamento de grandes volumes de informações;
  • Desenvolver processos de ingestão, transformação e processamento de dados utilizando Apache Spark, PySpark e SQL;
  • Implementar arquiteturas Lakehouse e Medallion (Bronze, Silver e Gold), estruturando fluxos de dados desde a ingestão até a disponibilização para consumo analítico;
  • Trabalhar com Delta Lake, Delta Tables e recursos avançados do Databricks para armazenamento, versionamento, otimização e gerenciamento de dados;
  • Desenvolver e otimizar processos de ETL/ELT, integrando diferentes fontes de dados, especialmente sistemas SAP;
  • Atuar na extração, integração e transformação de dados provenientes do SAP S/4HANA, SAP ECC e demais soluções do ecossistema SAP;
  • Implementar integrações entre SAP e Databricks utilizando APIs, OData, conectores e mecanismos de ingestão de dados;
  • Desenvolver soluções de processamento em batch e streaming, conforme as necessidades dos projetos;
  • Implementar boas práticas de governança, qualidade, segurança, linhagem e monitoramento de dados, incluindo recursos do Unity Catalog;
  • Realizar otimizações de performance em consultas SQL, jobs e workflows no ambiente Databricks;
  • Atuar na automação e orquestração de pipelines, garantindo a confiabilidade e a disponibilidade dos processos;
  • Trabalhar em conjunto com equipes de Arquitetura, BI, Analytics e áreas de negócio na construção de soluções orientadas a dados.

REQUIREMENTS AND QUALIFICATIONS


Requisitos Técnicos

  • Experiência sólida em Engenharia de Dados, com atuação em projetos de arquitetura e processamento de grandes volumes de dados;
  • Experiência avançada e prática com Databricks, incluindo desenvolvimento, implementação e otimização de pipelines de dados;
  • Domínio de Apache Spark, PySpark e Spark SQL;
  • Conhecimento avançado em Delta Lake, Delta Tables e arquitetura Lakehouse;
  • Experiência com arquitetura Medallion (Bronze, Silver e Gold);
  • Conhecimento em Databricks Workflows, Jobs e recursos de orquestração;
  • Experiência com Unity Catalog, governança, controle de acesso e linhagem de dados;
  • Domínio de SQL e Python aplicados à Engenharia de Dados;
  • Experiência em processos de ETL/ELT e integração de múltiplas fontes de dados;
  • Conhecimento do ecossistema SAP, especialmente SAP S/4HANA e/ou SAP ECC;
  • Experiência com extração e integração de dados SAP por meio de APIs, OData, RFC, IDoc ou outros mecanismos;
  • Conhecimento em SAP Datasphere, SAP BW/4HANA ou SAP Data Services;
  • Vivência com ambientes em nuvem, preferencialmente AWS, Azure ou Google Cloud.

Vamos gostar muito se, além disso tudo, você tiver:

  • Certificação Databricks Data Engineer Associate ou Professional;
  • Experiência com Delta Live Tables/Lakeflow Declarative Pipelines;
  • Conhecimento em CI/CD, Git e automação de deploy de pipelines;
  • Experiência com processamento de dados em tempo real (streaming);
  • Conhecimento em SAP BTP e SAP Integration Suite;
  • Experiência com arquiteturas de dados modernas e ambientes corporativos de grande porte.

O futuro é agora e estamos aqui para transformar vidas, negócios e empresas. Vamos juntos?


Somos o Grupo SysMap, formado pelas marcas SysMap Solutions, TriggoLabs e triggo.ai,um ecossistema de empresas de grande impacto no mercado, com soluções inovadoras em tecnologia que transformam negócios e desenvolvem pessoas.

Nossa essência é movida pela paixão por inovação, colaboração e crescimento contínuo. Há mais de 25 anos, superamos expectativas ao resolver desafios de negócio complexos, atuando em diferentes segmentos e acompanhando de forma ativa a evolução tecnológica.

Aqui, acreditamos que tecnologia só gera valor quando é construída por pessoas. Por isso, cultivamos um ambiente ético, colaborativo e diverso, onde o aprendizado é constante e a excelência pelo que fazemos faz parte do nosso jeito de ser.

A única forma de participar de processos seletivos do Grupo SysMap é por meio das páginas da empresa na plataforma Gupy e não há pagamento de taxa de participação ou contratação.


Related jobs

See all Data Engineer jobs

Other jobs at SysMap Solutions