Plattformexperte für Databricks (m/w/d) ID26895-0

Plattformexperte für Databricks (m/w/d) ID26895-0

Laufzeit: 01.05.2026 - 31.12.2026
Volumen: 160 Std.
Einsatzort: Recklinghausen / Remote

Projektbeschreibung

Ziel ist es, ein Reporting für den Nachrichtenversand in der energiewirtschaftlichen Marktkommunikation (MaKo) in Databricks und PowerBI aufzubauen. Gesucht wird ein erfahrener Plattformexperte für Databricks (m/w/d), der neben tiefem technischen Know-how auch erprobte Best Practices aus vergleichbaren Projekten einbringt.

Aufgaben

Der Schwerpunkt der Tätigkeit liegt auf der Konzeption und Umsetzung des Reports:

• Konzeption und Entwicklung einer skalierbaren Lösung für die Datenplattform in Databricks.
  
• Datenintegration in den unternehmensweiten Data Lake in einer Medallion-Architektur.
  
• Aufbau eines performanten Datenmodells für das Reporting unter Berücksichtigung der unternehmensweiten IT-Vorgaben (Deployment in Multi-Tier-Umgebungen, Quality Gates).
  
• Durchführung von Optimierungsmaßnahmen zur Effizienz- und Qualitätssteigerung.
  
• Dokumentation von Architekturentscheidungen, Prozessen und Projektergebnissen.
  

Anforderungen – Must-Have

• Mehrjährige Erfahrung mit Databricks in Konzeption und Implementierung im Bereich Data Engineering (Datenmodellierung, ETL, Orchestrierung von Ladeprozessen).
  
• Tiefgreifendes Verständnis von Layer-Datenmodellen (z. B. Medallion).
  
• Erfahrung in der Entwicklung von Berechtigungskonzepten.
  
• Kenntnisse in Continuous Ingestion / Continuous Development.
  
• Fundiertes Verständnis moderner Datenplattformen.
  
• Lösungsorientierte, strukturierte Arbeitsweise.
  
• Sehr gute Kommunikations- und Moderationsfähigkeiten.
  
• Sicherer Umgang mit SQL und Python.
  
• Verständnis von IT Service Management Prozessen (ITIL).
  
• Erfahrung in agilen Projekten, insbesondere Scrum.
  

Nice-to-Have

• Kenntnisse in Microsoft Azure im Kontext von Databricks / Data Engineering.
  
• Erfahrung mit Machine Learning und LLMs in Databricks.
  
• Sicherer Umgang mit Jira und Confluence.
  
• Gute Kenntnisse in Excel und PowerPoint.
  
• Sehr gute Deutschkenntnisse in Wort und Schrift.
  

Zusätzliche Informationen

Alle notwendigen Informationen und Zugänge werden vorab bereitgestellt.