Databricks Ingenieur

• Practice Data

• Location Netherlands, Netherlands

Next Ventures arbeitet derzeit mit einem großen Beratungsunternehmen zusammen, um ein Team von etwa 5+ Databricks Engineers für Projekte aufzubauen, die Folgendes beinhalten:

• Datenübernahme
• Datenmigration
• Neue Datenplattform

Es handelt sich um eine freiberufliche Tätigkeit mit einer Mindestdauer von 12 Monaten, die jedoch höchstwahrscheinlich um weitere 12 Monate verlängert wird.

Wichtige Details
Der Endkunde ist im Finanzsektor tätig
Kein Niederländisch erforderlich

Anforderungen

• Mindestens 6 Jahre Erfahrung im Bereich Data Engineering
• Mindestens 3 Jahre praktische Erfahrung mit Databricks

Verantwortlichkeiten

• Entwerfen und entwickeln Sie Datenpipelines mit PySpark, Delta Lake und Databricks Workflows.
• Implementieren Sie ETL / ELT-Pipelines für strukturierte und unstrukturierte Daten.
• Optimieren Sie Databricks-Cluster, Jobs und Notebooks für Leistung und Kosteneffizienz.
• Erstellen Sie Frameworks für Datenqualität und Beobachtbarkeit mit Delta Live Tables, Unity Catalog und MLflow.

• share
• 
• 
• 
•