Senior Data Engineer On-Premises & Kubernetes (m/w/d)
Summary
Senior Data Engineer building and evolving an on-premises data platform in Dresden: designing batch and streaming pipelines, integrating data workloads into Kubernetes and S3-compatible storage, and automating orchestration and deployment. Core stack includes Python, SQL, Kubernetes, Linux, Kafka/Flink, Spark, Airflow/Dagster and Apache Iceberg.
In dieser Position entwickeln Sie eine moderne On-Premises-Datenplattform, treiben deren Weiterentwicklung voran und gestalten Datenorchestrierung, Deployment und Plattformautomatisierung. Sie implementieren Batch- und Streaming-Pipelines, integrieren Workloads in Kubernetes-Umgebungen und S3-kompatible Speichersysteme. Zudem arbeiten Sie an Datenmanagement, -katalogen und -versionierung, evaluieren neue Technologien und arbeiten eng mit Architekten, Infrastruktur- und Security-Teams zusammen. Ihr Beitrag treibt technologische Innovation und Skalierung in anspruchsvollen Branchen voran.
Leistungen / Benefits- attraktives Vergütungspaket
- Corporate Benefits/ Mitarbeiterrabatte
- 30 Tage Urlaub
- Übernahmechancen
- Entwicklungsmöglichkeiten
- enge Einbindung in innovative Projekte
- Konzeption und Entwicklung einer On-Premises-Datenplattform
- Entwicklung von Datenorchestrierung, Deployment und Plattformautomatisierung
- Implementierung von Batch- und Streaming-Datenpipelines
- Integration datengetriebener Workloads in Kubernetes-Umgebungen
- Anbindung von S3-kompatiblen Speichersystemen
- Arbeiten mit Datenkatalogen, Versionierung und Data Management
- Erstellung von PoCs und Evaluierung neuer Technologien, ggf. KI-Tools
- Enge Zusammenarbeit mit Lead-Architekten sowie Infrastruktur- und Security-Teams
- Abgeschlossenes Studium in Informatik, Data Engineering oder vergleichbarer Qualifikation
- Mehrjährige Erfahrung in der Entwicklung von Datenplattformen und Data Pipelines
- Fundierte Kubernetes- und Linux-Kenntnisse
- Sehr gute Programmierkenntnisse in Python und SQL; weitere Sprachen vorteilhaft (Go, Java, Bash)
- Erfahrung mit modernen Data-Engineering-Technologien (Kafka/Flink, Spark, Airflow/Dagster, S3 oder Apache Iceberg)
- Verständnis für Cloud-Native-Architekturen und On-Premises-/Edge-Plattformen
- Analytische, eigenständige und lösungsorientierte Arbeitsweise; Offenheit für neue Technologien
- Sehr gute Deutsch- und Englischkenntnisse
- analytisch
- eigenständig
- lösungsorientiert
- Kubernetes
- Linux
- Python