Ingeniero de Datos Senior migración Cloudera

• Today

Grupo TECDATA Engineering

Role overview

Qualifications

Experience with HDFS and Google Cloud Storage
Advanced experience with Apache Spark, Scala, and PySpark
Experience in Spark Streaming and Apache Kafka
Knowledge of Kudu and destination solutions like Cloud SQL and Google Spanner

Responsibilities

Migrate platforms from Cloudera to Google Cloud Platform (GCP)
Work on workload migration to Dataproc and Dataproc Serverless
Ensure data governance including Dataplex and Cloud IAM
Validate and optimize data pipelines in cloud environments

Key facts

Remote from: Delaware (USA), United States
Full time
Senior (5-10 years)
Spanish

Hard skills

About the company

Grupo TECDATA Engineering

IT Services & IT Consulting

TECDATA , es una dinámica compañía de servicios en Tecnologías de la Información con infraestructura propia en España , ofreciendo servicios profesionales y soluciones tecnológicas para nuestros clientes. Aportamos mucha experiencia y muy focalizada en tecnologías específicas que nos hace diferentes , el cliente es la clave de nuestra estrategia, y centramos nuestros esfuerzos en comprender sus necesidades para incrementar su productividad y optimizar su negocio.

Company details

Company typeScaleup

IndustryIT Services & IT Consulting

Company size201 - 500

Links

Website LinkedIn See all jobs

Your match analysis

See how your profile stacks up against this role.

We compared the job requirements to your profile to show where you're strong and where you fall short.

Job description

Data Engineer – Migración de Cloudera a GCP

Trabajo remoto

Buscamos un/a Data Engineer senior con experiencia sólida en migraciones de plataformas Cloudera a Google Cloud Platform (GCP).

Requisitos imprescindibles:

Experiencia con HDFS y Google Cloud Storage.
Experiencia avanzada con Apache Spark, Scala y PySpark, y migración de workloads a Dataproc y Dataproc Serverless.
Experiencia en Spark Streaming y Apache Kafka, incluyendo servicios gestionados de Kafka en GCP.
Conocimientos de Kudu y soluciones de destino como Cloud SQL, Google Spanner y Bigtable.
Experiencia con Hive Metastore, Apache Ranger y gobierno del dato, incluyendo Dataplex, Cloud IAM y BigQuery Policy Tags.
Experiencia en migración, validación y optimización de pipelines de datos en entornos cloud.

Apply once. Then go straight to the hiring manager.

After you apply, unlock the direct contact details of the people who actually make the call. A quick follow-up makes you 5x more likely to land an interview.