Senior Data Engineer AWS
Summary
The Senior Data Engineer will develop and maintain AWS-based data platforms and pipelines within a DevOps team for a logistics client. The role involves optimizing Spark-based ETL processes, automating infrastructure, and collaborating with stakeholders to build robust data products.
................
Für unseren Kunden aus der Logistikbranche in Bern, suchen wir eine:n motivierte:n und aufgeschlossene:n Senior Data Engineer AWS.
In diesem Projekt übernimmst du als Teil eines DevOps-Teams eine zentrale Rolle bei der Entwicklung und Weiterentwicklung einer modernen AWS-basierten Datenplattform. Du entwickelst robuste Datenpipelines, optimierst die Verarbeitung grosser Datenmengen und gestaltest gemeinsam mit Data Ownern, Data Analysts und der Architektur nachhaltige Datenprodukte. Gleichzeitig unterstützt du das Team bei Automatisierung, Cloud-Migrationen und der kontinuierlichen Optimierung von Performance und Kosten.
Deine Aufgaben:
- Entwicklung, Betrieb und kontinuierliche Weiterentwicklung einer AWS-basierten Dateninfrastruktur und entsprechender Datenpipelines
- Optimierung und Sicherstellung des stabilen Betriebs von Spark-ETL-Prozessen für eine effiziente Datenverarbeitung
- Entwicklung und Pflege robuster Datenpipelines in enger Zusammenarbeit mit Data Ownern und Data Analysts
- Analyse fachlicher und technischer Anforderungen sowie Konzeption und Umsetzung von Datenprodukten innerhalb eines AWS Big Data Stacks
- Automatisierung von Entwicklungs- und Betriebsprozessen sowie kontinuierliche Weiterentwicklung des bestehenden Entwicklungs-Stacks
- Coaching und fachliche Unterstützung anderer Data Engineers bei technischen Fragestellungen und Automatisierungsthemen
- Enge Zusammenarbeit mit Business-Stakeholdern und Architekturteams zur Ausrichtung technischer Lösungen an den Geschäftsanforderungen
- Optimierung bestehender AWS Services hinsichtlich Performance und Kosten
- Unterstützung bei Migrationen auf neue Tools, Technologien und Cloud-Services
- Mitgestaltung moderner CI/CD-, Infrastructure-as-Code- und DevOps-Prozesse
Dein Profil:
- Mehrjährige Erfahrung im Data Engineering und in der Entwicklung komplexer Datenpipelines
- Hochschulabschluss in Informatik oder eine vergleichbare Qualifikation bzw. entsprechende Berufserfahrung
- Fundierte Kenntnisse in Apache Spark, SQL und Python
- Erfahrung mit AWS und cloudbasierten Big-Data-Architekturen
- Idealerweise Kenntnisse in AWS Analytics Services wie Glue, SageMaker, Athena, Lambda und Batch
- Erfahrung in der Softwareentwicklung mit Scala oder Java von Vorteil
- Kenntnisse in CI/CD sowie Infrastructure as Code mit Terraform
- Gutes Verständnis von DevOps Best Practices und automatisierten Entwicklungs- und Betriebsprozessen
- Erfahrung in der Optimierung von Cloud-Ressourcen hinsichtlich Performance und Kosten von Vorteil
- Agile und teamorientierte Arbeitsweise mit ausgeprägtem Growth Mindset und Freude am Wissensaustausch
- Gute Deutschkenntnisse in Wort und Schrift sowie gute Englischkenntnisse
Die Coopers Group AG ist eine agile Schweizer Recruiting Agentur, die Spezialisten und Führungskräfte in den Bereichen IT, Life Sciences, Engineering und Finance vermittelt. Mit flexiblen Ansätzen bringen wir Kandidat:innen und Unternehmen zusammen, die nicht nur fachlich, sondern auch menschlich zusammenpassen.