Data Engineer Big Data & Cloud

• Just Now

Grupo TECDATA Engineering

Role overview

Qualifications

More than 3 years of experience in Big Data
High level of Scala on Apache Spark and Java
Deep knowledge of Apache Kafka
Experience developing on Google Cloud Platform

Responsibilities

Architecture and development of a data platform centered on Big Data
Designing and developing batch and real-time processes with Apache Spark
Modeling in Apache HDFS/Hive, Apache Kudu, and Apache Solr
Planning processes with Control-M

Key facts

Remote from: Spain, Europe, European Union, EMEA
Full time
Mid-level (2-5 years)
Data Engineer
Spanish

Hard skills

Other skills

Decision Making
Communication

About the company

Grupo TECDATA Engineering

IT Services & IT Consulting

TECDATA , es una dinámica compañía de servicios en Tecnologías de la Información con infraestructura propia en España , ofreciendo servicios profesionales y soluciones tecnológicas para nuestros clientes. Aportamos mucha experiencia y muy focalizada en tecnologías específicas que nos hace diferentes , el cliente es la clave de nuestra estrategia, y centramos nuestros esfuerzos en comprender sus necesidades para incrementar su productividad y optimizar su negocio.

Company details

Company typeScaleup

IndustryIT Services & IT Consulting

Company size201 - 500

Links

Website LinkedIn See all jobs

Your match analysis

See how your profile stacks up against this role.

We compared the job requirements to your profile to show where you're strong and where you fall short.

Job description

Buscamos un perfil senior, con más de 3 años de experiencia, que asuma con autonomía la arquitectura y el desarrollo de una plataforma de datos centrada en Big Data (Cloudera / Spark) y con parte en Google Cloud Platform

Requisitos

Big Data (imprescindible) Más de 3 años diseñando y desarrollando procesos batch y real time con Apache Spark en el ecosistema Cloudera.

Alto nivel de Scala sobre Apache Spark; Java. Modelado en Apache HDFS/Hive, Apache Kudu y Apache Solr.

Conocimiento profundo de Apache Kafka, a nivel de arquitectura y de desarrollo.

Cloud (GCP) Experiencia desarrollando sobre Google Cloud Platform. BigQuery (modelado), dbt/SQL y Python. Pub/Sub, Dataflow, Cloud Functions y Cloud Storage.

Transversal CI/CD con Git/Bitbucket y Jenkins. Planificación de procesos con Control-M. Trabajo en equipos Scrum.

Autonomía, capacidad de decisión y buena comunicación con perfiles técnicos y de negocio.

Trabajo hibrido en madrid Alcobendas 2 o 3 Dias Remoto

Apply once. Then go straight to the hiring manager.

After you apply, unlock the direct contact details of the people who actually make the call. A quick follow-up makes you 5x more likely to land an interview.