Ein erfahrener und vielseitiger Senior GCP Data Engineer mit fundierten Fachkenntnissen in den Bereichen DevOps, CI/CD, Containerisierung und fortgeschrittenem Data Engineering auf der Google Cloud Platform. Der ideale Kandidat vereint ausgeprägtes technisches Verständnis mit der Fähigkeit, sich in geschäftliche Zusammenhänge einzubringen – und ist in der Lage, geschäftliche Anforderungen in skalierbare, produktionsreife technische Lösungen umzusetzen.
- Entwurf, Aufbau und Optimierung von Datenpipelines und Datenerfassungs-Frameworks unter Verwendung von GCP-Diensten wie Dataflow, Pub/Sub, BigQuery, Cloud Storage, Cloud Run und No-SQL.
- Konzeption und Implementierung von durchgängigen CI/CD-Pipelines für Daten-Workloads unter Verwendung von Vorlagen und GitLab CI, um die Automatisierung sowie die Einhaltung von DevOps-Standards sicherzustellen.
- Entwicklung und Verwaltung von containerisierten Anwendungen für skalierbare und ausfallsichere Datendienste. - Implementierung von Frameworks für Datenqualität, Überwachung und Beobachtbarkeit über alle Pipelines hinweg.
- Umsetzung komplexer geschäftlicher Anforderungen in eine technische Architektur unter Gewährleistung der Übereinstimmung mit der Unternehmensdatenstrategie und den Governance-Vorgaben.
- Stellen Sie sicher, dass bei allen GCP-Lösungen die bewährten Verfahren in den Bereichen Sicherheit, Compliance und Kostenoptimierung eingehalten werden.
Unabdingbare Kernkompetenzen:
• GCP (BigQuery, Dataflow, Pub/Sub, Composer, Cloud Functions, GCS, Cloud SQL, Firestore und NoSQL-Entwurfsmuster).
• GitOps, Infrastructure as Code (Terraform, Deployment Manager) und automatisierte Tests in Datenpipelines.
• Fundierte Kenntnisse in Docker, Kubernetes und der Orchestrierung von Microservices.
• Erfahrung mit Scrum; Vertrautheit mit dem Verfassen von User Stories, der Backlog-Verfeinerung und Sprint-Reviews
Zusätzliche Fachkenntnisse, Soft Skills und Sprachkenntnisse:
– Fundierte Kenntnisse in Python, SQL und Java (von Vorteil).