Pessoa Engenheira de Dados III (GAVB)

Work set-up: 
Full Remote
Contract: 
Experience: 
Mid-level (2-5 years)
Work from: 

Offer summary

Qualifications:

Sólido conhecimento em Python, SQL, PySpark e Spark SQL., Experiência com arquitetura de dados Lakehouse, Delta Lake e S3., Conhecimento em DataOps, governança de dados e ferramentas de CI/CD como Azure DevOps., Inglês avançado para comunicação técnica e colaboração internacional..

Key responsibilities:

  • Projetar pipelines de aquisição de dados usando PySpark e ferramentas de mercado.
  • Implementar arquitetura de dados Lakehouse com S3 e Delta Lake.
  • Automatizar testes e implantações integrando com DevOps.
  • Gerenciar catálogo de dados, permissões e monitorar jobs Spark no Databricks.

GAVB Consulting logo
GAVB Consulting SME https://www.gavb.com.br
201 - 500 Employees
See all jobs

Job description

JOB DESCRIPTION

Um dos maiores grupos de beleza do mundo, o Grupo Boticário é uma empresa brasileira presente em mais de 40 países. É dono das marcas O Boticário, Eudora, Quem Disse, Berenice?, Vult, O.U.i, Dr. JONES, Tô.que.tô, TRUSS, e do marketplace Beleza na Web, além de atuar com produtos licenciados como Australian Gold, Bio Oil, Nuxe, e Pampers e sua divisão para o mercado B2B. Essa interação entre diferentes marcas, ativos, plataformas, rede de franqueados, representantes, distribuidores, varejistas, sellers e fornecedores formam o ecossistema de beleza do Grupo Boticário que oferece, ainda, soluções digitais de gestão de negócio para o varejo brasileiro por meio das suas marcas Mooz, Casa Magalhães e GAVB. São mais de 19 mil colaboradores diretos, com mais de 4 mil lojas em 1.780 cidades brasileiras.


Vem fazer beleza com a gente!


Conheça o time da GAVB


Somos especialistas em transformar dados em inteligência para impulsionar o sucesso dos nossos clientes. Com expertise em Data & Analytics e um time de mais de 500 consultores, oferecemos soluções personalizadas que potencializam resultados e aceleram o crescimento das empresas do futuro.


RESPONSIBILITIES AND ASSIGNMENTS

Projetar pipelines para aquisição de dados em larga escala usando PySpark ou ferramentas de mercado.

Implementar arquitetura de dados baseada em Lakehouse com S3 e Delta Lake.

Automatizar testes e implantações com integração ao Devops.

Gerenciar catálogo de dados, permissões e versionamento via Unity Catalog.

Monitorar e otimizar jobs Spark em Databricks com foco em desempenho e custo.


REQUIREMENTS AND QUALIFICATIONS

Databricks e Spark: Desenvolvimento de pipelines com PySpark e Spark SQL no ambiente Databricks, projetos com Delta Lake sobre Amazon S3, otimização de jobs Spark (ajuste de performance, particionamento, uso de ZOrder, cache) e experiência com Databricks Workflows para orquestração.

AWS (ou Azure): Amazon S3 como data lake, e IAM e segurança em nível de bucket e cluster.

Arquitetura e Plataforma de Dados: Arquitetura Lakehouse baseada em arquitetura medalhão (bronze, prata, ouro), assim como integração de múltiplas fontes: bancos relacionais, APIs, dados em lote e streaming e modelagem e versionamento com Delta Lake.

DataOps e Governança: CICD com Databricks Repos, Azure DEVOPS, observabilidade com registro personalizado, CloudWatch e alertas, controle de qualidade de dados (Deequ, Grandes Expectativas ou soluções customizadas) e Catálogo Governança com Unity, RBAC e uso de tags.

Linguagens e Ferramentas: Python e SQL avançados, experiência com JSON, Parquet, Avro, conhecimento em ferramentas de orquestração como Airflow (opcional) ou Databricks Workflows., bem como uso de notebooks colaborativos no ambiente Databricks.

Habilidades interpessoais: Colaboração com tempos de produto, ciência de dados e engenharia e boa comunicação e documentação técnica em ambientes ágeis.

Idioma: Inglês avançado.


Desejável:

Streaming com Streaming Estruturado ou Kafka + Databricks.

Uso do Snowflake como camada de consumo.

Experiência com Infra as Code (Terraform para Databricks e AWS) e FinOps.

Conhecimento de Data Mesh ou Data Contracts.



ADDITIONAL INFORMATION

NOSSOS BENEFÍCIOS


Já falamos que o Grupo Boticário é o melhor e maior ecossistema de beleza, né?

E quando falamos dos Benefícios, nos preocupamos com as nossas pessoas e por isso, oferecemos um pacote de benefícios* que permite uma vida mais equilibrada e completa:


  • Aqui, sua Saúde é prioridade
    • . Plano médico e odontológico

      . Auxílio medicamentos

      . Vale saúde para familiares

      . Sessões de psicoterapia gratuitas

      . Telemedicina e 2ª opinião médica

      . Vacina da gripe e HPV gratuitas

      . Programas de cuidado com a saúde


      • Para cuidar da sua Alimentação
        • . Vale refeição ou restaurante local (conforme modelo de trabalho)

          . Vale alimentação

          . Vale alimentação de Natal


          • Garantindo BemEstar e Qualidade de Vida em todos os aspectos da vida
            • . Plano de academias e estúdios de atividade física

              . Auxílio home office (modelos de trabalho híbrido e remoto)

              . Plano de saúde para pets

              . Day off de aniversário

              . Desconto de até 40% em nossos produtos

              . Associação para colaboradores (convênios e parcerias, loja multimarcas, academias total pass, cursos e muito mais!)

              . Programa de viagens e hospedagens


              • Para a Família, nosso bem mais precioso
                • . Auxílio educação infantil

                  . Crédito nutrição infantil

                  . Auxílio babá

                  . Auxílio material escolar

                  . Orientação jurídica, psicológica e social

                  . Apoio para pais atípicos

                  . Licença parental estendida (180 dias para mães e 120 dias para pais)


                  • Mobilidade para sua jornada presencial
                    • . Vale Transporte e Estacionamento (modelos híbrido e presencial)


                      • Seguridade para proteção e tranquilidade financeira
                        • . Seguro de Vida

                          . Apoio ao falecimento de pais

                          . Previdência Privada

                          . Empréstimos consignados


                          *Os pacotes de benefícios são configurados conforme regras de elegibilidade.


                          GAVB CONSULTING

                          A GAVB é uma empresa brasileira de tecnologia que faz parte do Grupo Boticário #UmSóGrupo

                          Essa parceria nasceu com um propósito de ajudar a transformar o GB no melhor e maior ecossistema de beleza do mundo!


                          Somos especializados em soluções de Inteligência Artificial e Big Data, Business Intelligence, Cloud, RPA e DevOps.


                          Apoiamos empresas e organizações a inovarem com práticas datadriven business, oferecendo serviços de consultoria e desenvolvimento para projetos de transformação tecnológica, inovação dos negócios e jornada para a nuvem.


                          Nosso propósito é emponderar pessoas e empresas a atingir mais, com o uso de dados e tecnologia, gerando vantagem competitiva através da tomada de decisões baseadas em dados. E para isso, contamos com um time de mais de 400 Ninjas engajados com a nossa cultura e valores: Espírito empreendedor, Mente aberta e Sonho grande!


                          Estamos presentes em projetos do Grupo Boticário e nos mais variados segmentos (Varejo, Financeiro, Indústria, Bens de consumo, Logística, Construtoras e Serviços) em projetos nacionais e internacionais. Além disso, somos parceiros estratégicos de empresas globais como; Google, AWS, Microsoft, Oracle, Red Hat e UiPath.


                          Atuamos em gestão, armazenamento, transformação e processamento de dados utilizando tecnologias de Big Data, Inteligência Artificial e Machine Learning e Business Intelligence, em nuvem ou local, transformação de ambientes de tecnologia através de soluções Cloud e DevOps.


                          Aqui, você é protagonista da sua jornada. Venha fazer parte dessa cultura colaborativa!


Required profile

Experience

Level of experience: Mid-level (2-5 years)
Spoken language(s):
English
Check out the description to know which languages are mandatory.

Other Skills

  • Collaboration
  • Communication

Data Engineer Related jobs