Match score not available

685 - Ssr/Sr Data Engineer (Python-Azure-Databricks-Spark)

extra holidays - extra parental leave
Remote: 
Full Remote
Contract: 
Experience: 
Senior (5-10 years)
Work from: 

Offer summary

Qualifications:

Advanced skills in Python and SQL, 2-4 years of experience in Databricks, Solid knowledge of Azure cloud platform, Bachelor's degree or related field.

Key responsabilities:

  • Design and maintain data pipelines
  • Optimize data processing architecture
Darwoft logo
Darwoft SME https://darwoft.com/
51 - 200 Employees
See more Darwoft offers

Job description


Sumamos un/a Ingeniero/a Principal de Datos con sólida experiencia en programación en Python y habilidades para construir pipelines de procesamiento de datos a gran escala utilizando tecnologías como Databricks, Spark, Python y PostgreSQL.

Es fundamental contar con excelentes habilidades de comunicación y un enfoque proactivo para resolver desafíos.

La experiencia en las industrias de Bienes de Consumo (CPG) o Retail será una ventaja, aunque no es un requisito.

Responsabilidades:

  • Experiencia en Programación: Diseñar, codificar y mantener pipelines de procesamiento de datos a gran escala utilizando Databricks, Spark, Python y SQL.
  • Procesamiento de Datos: Arquitectar y optimizar pipelines de datos para garantizar alta eficiencia, escalabilidad y confiabilidad.
  • Gestión de Plataformas en la Nube: Desarrollar e implementar soluciones de datos en plataformas en la nube, preferentemente Azure.
  • Aseguramiento de la Calidad: Implementar procesos para garantizar la precisión, consistencia y confiabilidad de los datos.
  • Integración de Datos: Integrar datos de diversas fuentes y formatos en los pipelines de procesamiento.
  • Gobernanza de Datos: Colaborar con equipos de gobernanza de datos para establecer y aplicar mejores prácticas y estándares de calidad.

Requisitos:

  • Habilidades de Programación: Dominio avanzado de Python.
  • Experiencia en Databricks: Mínimo 2 años (preferiblemente más de 4 años).
  • Conocimientos en Apache Spark: Experiencia en el uso de Spark para un procesamiento eficiente de datos.
  • Conocimientos en SQL: Habilidades avanzadas en SQL para análisis y transformaciones de datos.
  • Experiencia en la Nube: Conocimiento sólido de al menos una plataforma en la nube, preferiblemente Azure.
  • Comunicación: Capacidad para comunicarse de manera efectiva y cuestionar suposiciones para proponer soluciones.
  • Conocimientos de la Industria: Experiencia en las industrias de CPG o Retail es una ventaja, pero no un requisito.

Habilidades Clave:

  • Programación en Python y SQL.
  • Construcción y optimización de pipelines con Databricks y Spark.
  • Sólida comprensión de plataformas en la nube, especialmente Azure.
  • Mejores prácticas en aseguramiento de la calidad y gobernanza de datos.

Habilidades/Experiencia Preferidas:

  • Familiaridad con otras tecnologías centradas en datos como Data Warehousing, ETL, Analítica y Reporting.
  • Experiencia previa trabajando con equipos colaborativos, especialmente equipos de Ciencia de Datos e Ingeniería.
  • Experiencia en las industrias de Bienes de Consumo (CPG) o Retail.
  • Título universitario o de posgrado en informática, ingeniería de datos o campos relacionados.
  • Entre 4 y 6 años de experiencia en roles de ingeniería de datos, enfocándose en pipelines de procesamiento de datos a gran escala.

    ¡Postúlate ahora y únete a la querida Darwoft!
    talento@darwoft.com

    ¿Tienes consultas? Sigue al reclutador:
    LinkedIn: Hernán Vietto

Required profile

Experience

Level of experience: Senior (5-10 years)
Spoken language(s):
Spanish
Check out the description to know which languages are mandatory.

Other Skills

  • Problem Reporting
  • Communication
  • Problem Solving

Data Engineer Related jobs