33372 ETL Spezialist (m/w/d) Apache für unseren direkten Endkunden

Hesse, Frankfurt am Main  ‐ Onsite
This project has been archived and is not accepting more applications.
Browse open projects on our job board.

Description

Ihre Leistungen werden für das Projekt Railmate erbracht. Dieses hat folgenden Inhalt:
Railmate ist eine Initiative aus dem Projekt Mobility 4.0 der DB AG. Die Initiative zielt darauf ab, die Kundenzufriedenheit durch die Steigerung von Kundenfeedback und dessen integrierte und schnelle Verarbeitung mit direkter Zuleitung an die relevanten Adressanten in Fachabteilungen, operativen Abteilungen und Management zu verbessern. Durch die höhere Transparenz soll eine schnellere Erkennung und schneller Abstellung von Missständen bei der Leistungserbringung ermöglicht und neue Erkenntnisse zu Kundenbedürfnissen gewonnen werden.
Zur Verarbeitung und das Routing von Feedback soll eine hochautomatisierte Engine weiterentwickelt werden, mit der das Feedback analysiert, aufbereitet und den Fachabteilungen zur Verfügung gestellt werden soll. Dabei sollen ETL Strecken auf Basis MS SQL Server sowie Big Data Technologien wie Apache Hive und Apache Spark eingesetzt werden und perspektivisch in die Cloud migriert werden.

Ihre Aufgaben
• Entwicklung einer nachhaltigen und hochperformanten Datenbankarchitektur bzw. eines Datenbankschemas zur Speicherung von großen Mengen an Textdaten sowie von quantitativen Kennzahlen
• Selbstständige Bearbeitung von Aufgabenstellungen auf Basis des im Projekt vorhanden Auftragsmanagements
• Erstellen von Datenbankarchitekturen gemäß der Standards der Process Library und Referenzarchitekturen des Auftraggebers
• Beratung des Auftraggebers zur technischen Datenbankarchitektur der IT-Systeme im Themenumfeld sowie deren Weiterentwicklung.
• Umsetzung der Datenbankarchitektur auf Basis Microsoft SQL Server
• Optimierung von Datenbankqueries / Partitionierung / Indizierung insbesondere in Zusammenhang mit Hibernate sowie generell in Bezug auf parallele Abfragen
• Umsetzung der ETL Strecken auf Basis von Apache Nifi, Apache Kafka, Apache Spark sowie Apache Hive
• Evaluation und prototypische Umsetzung der Datenbankarchitektur auf Basis MS SQL Server 2019
• Dokumentation der Architektur und der Datenbankqueries

Muss-Anforderungen:
• Erfahrung in der Entwicklung einer nachhaltigen und hochperformanten Datenbankarchitektur zur Speicherung von großen Mengen an Textdaten sowie von quantitativen Kennzahlen
• Fundierte Berufs-/Projekterfahrung in der Konzeption, Ausgestaltung und Entwicklung von BI-Systemen/-Architekturen oder DWH-Umgebungen insbesondere mit Microsoft SQL Server 2016
• Fundierte Berufs-/Projekterfahrung in der Konzeption, Ausgestaltung und Entwicklung von ETL Strecken auf Basis Apache Kafka, Apache Spark und Apache Hive
• Ausgeprägte Methodenkompetenz für Daten-, Prozess- und ETL-Modellierung inkl. zugehöriger Werkzeuge und Design von
• Mehrjährige Erfahrung in Datenbankarchitektur und Datenbankentwicklung

Soll-Anforderungen:
• Kenntnisse im Bereich DB Fernverkehr, insbesondere beim Umgang mit Verspätungs- und Fahrzeugdaten
• Erfahrung in der Administration von SQL Server Datenbanken
• Erfahrung im Bereich Amazon Web Services
• Erfahrung in agiler Softwareentwicklung

Projektlaufzeit: 06.01.2020 bis Ende 2020, mit Option für gesamt 2021

Kontaktadresse:

Wenn wir damit Ihr Interesse geweckt haben und Sie sich bei uns melden - sei es per E-Mail oder in anderer Form -, erklären Sie zugleich Ihr EINVERSTÄNDNIS damit, dass wir Ihren vollständigen Namen, Ihre Adresse und Ihre Kontaktdaten sowie Ihre Angaben zur Qualifikation (z.B. Ausbildung, Tätigkeit, Profil, Referenzen) ausschließlich für unsere unternehmerischen Zwecke verarbeiten. Eine Weitergabe an Dritte erfolgt nicht (bzw. gegebenenfalls in einem späteren Stadium nur mit Ihrer gesonderten Einwilligung). Eine Löschung dieser Daten erfolgt, sobald feststeht, dass ein Vertrag in absehbarer Zeit nicht zu Stande kommt.

Wir weisen weiter darauf hin, dass Sie diese Einwilligung jederzeit mit sofortiger Wirkung widerrufen können, zweckmäßigerweise in Textform per E-Mail an
Wir verweisen im Übrigen auf die Datenschutzerklärung in unserem Impressum und weiter gehende Datenschutzregelungen beim Zustandekommen einer Vertragsbeziehung mit uns.
Start date
01.2020
Duration
12 months
(extension possible)
From
SPS Consulting & Services GmbH
Published at
28.11.2019
Contact person:
Ulrich Wenzel
Project ID:
1854379
Contract type
Freelance
To apply to this project you must log in.
Register