Description
Ihre Leistungen werden für die Anwendungen einer Abteilung und Plattformen des CIO-Bereichs Fernverkehr erbracht.• Diese Data Lake-Plattform erlaubt die performante Sammlung, Anreicherung, Verknüpfung, Veredelung und Auswertung von Daten aus verschiedensten Quellen des Fernverkehrs (Einsatz/Disposition der Fahrzeuge, der IT (WLAN, ZIP) in den Fahrzeugen sowie Sensor-, Fahrzeugzustands- und andere Live bzw. Telemetrie-Daten) und eröffnet umfassende Verbesserungspotentiale für die Datennutzung in allen Bereichen des Fernverkehrs.
• Mit dieser Plattform wird die Grundlage für Big-Data-Analysen und Data Science im Fernverkehr geschaffen, wodurch wertvolle Erkenntnisgewinne oder auch neue Geschäftsmodelle entstehen können.
• Die Plattform ist auf Basis aktueller Standardtechnologien (AWS Serverless und Hadoop) sowie -architekturen umgesetzt und ist bedarfsgerecht erweiterbar und beliebig skalierbar.
Ihre Aufgaben:
• Konzeption und Architektur der technischen Umsetzung eines fachlichen Use Cases für ein Data Lake mit Nutzung von Apache Spark/Scala auf Basis von Hadoop und AWS Technologien
• Implementierung von Datenflüssen und komplexen Datentransformationen
• Konzeptionelle Unterstützung und Implementierung von CI/CD Pipelines und automatisierten Testfällen
• Unterstützung bei der Definition der funktionalen und nicht funktionalen Anforderungen in Form von User Stories sowie der Umsetzung der Anforderungen im engen Austausch mit dem Fachbereich und den Business Analysten
• Erstellung der technischen Dokumentation
Muss-Anforderungen:
• Praktische Erfahrung in mindestens 3 Projekten im Big Data Umfeld sowie im Aufbau und der Umsetzung eines Data Lakes
• Nachweisbare Erfahrung in der Implementierung von automatisierten Testfällen (Unit- und Integrationstests) mit entsprechender Kenntnis gängiger Bibliotheken
• Nachweisbare Erfahrung in der Analyse und konzeptionellen Umsetzung komplexer Use Cases in mindestens 2 Data Lake Projekten
• Nachweisbare Erfahrungen in mindestens 2 Projekten in der Umsetzung von komplexen Datentransformation mit Spark/Scala als Lead Entwickler
• Nachweisbare Erfahrung in mindestens 2 Projekten im Big Data Umfeld und der Umsetzung im AWS Stack
Projektlaufzeit: 16.11.2020 bis zunächst April 2021, mit Verlängerung für gesamt 2021
Kontaktadresse:
Wenn wir damit Ihr Interesse geweckt haben und Sie sich bei uns melden - sei es per E-Mail oder in anderer Form -, erklären Sie zugleich Ihr EINVERSTÄNDNIS damit, dass wir Ihren vollständigen Namen, Ihre Adresse und Ihre Kontaktdaten sowie Ihre Angaben zur Qualifikation (z.B. Ausbildung, Tätigkeit, Profil, Referenzen) ausschließlich für unsere unternehmerischen Zwecke verarbeiten. Eine Weitergabe an Dritte erfolgt nicht (bzw. gegebenenfalls in einem späteren Stadium nur mit Ihrer gesonderten Einwilligung). Eine Löschung dieser Daten erfolgt, sobald feststeht, dass ein Vertrag in absehbarer Zeit nicht zu Stande kommt.
Wir weisen weiter darauf hin, dass Sie diese Einwilligung jederzeit mit sofortiger Wirkung widerrufen können, zweckmäßigerweise in Textform per E-Mail an
Wir verweisen im Übrigen auf die Datenschutzerklärung in unserem Impressum und weiter gehende Datenschutzregelungen beim Zustandekommen einer Vertragsbeziehung mit uns.