Description
Sehr geehrte Damen und Herren,Für einen unserer Kunden suchen wir einen Hadoop Entwickler mit Python Erfahrung.
Aufgaben/Themen:
- Das Entwicklungsteam besteht hauptsächlich aus Data Scientists und soll insbesondere bei der Erstellung von Datenverarbeitungsstrecken für den Produktiveinsatz unterstützt werden. Das Team entwickelt und betreibt innovative Software-as-a-Service Lösungen für die Webshops unseres Kunden
- Arbeiten im Kontext von u.a. Hadoop, Scala, Java, Spark / Python, PySpark
- Entwicklung von Datentransformationen mit HiveQL / Map-Reduce
- Entwicklung und Automatisierung von Datenverarbeitungsstrecken (z.B. mit AirFlow)
- Bereitstellung von Datenaggregaten
- Nach Bedarf auch Unterstützung bei der Entwicklung und dem Betrieb verschiedener Produkte; eingesetzte Technologien u.a. Python, Docker, AirFlow, Jenkins, Graphite/Grafana, Icinga.
- Selbständiges, kreatives Arbeiten im Scrum-Team und Fähigkeit zur eigenständigen Konzeption und Entwicklung von Lösungsansätzen im agilen Umfeld
Mit welchen kritischen Ereignissen/Themen wird der Positionsinhaber konfrontiert?
- Big Data Infrastruktur mit hoher Informationssicherheit
- Verschiedenste Quelldatensysteme sowie heterogene Quelldaten
- Unterschiedliche Prozesse, Vorgehensweisen und ggf. Kulturen unseres Kunden
- Heterogene Qualität der Dokumentation bestehender zu berücksichtigender Prozesse und Datenflüsse
Projektziel:
- Definition und Umsetzung der Datenverarbeitungsstrecken
- Integration neuer Daten aus internen uns externen Datenquellen
- Mitentwicklung in verschiedenen Projekten mit Fokus auf die Datenversorgung
Einsatzort PLZ 2
Arbeitsbeginn 06.09.2017
Arbeitsende 30.11.2017
Kurz zu uns: IPSWAYS ein renommierter Dienstleister für die Rekrutierung und das Management von IT-Personal. Durch unsere intensiven Kontakte zu Unternehmen aller Branchen und Größen erfahren wir von vielen interessanten IT-Projekten und können Ihnen so Zugang zu reizvollen Projekten bieten und attraktive Angebote unterbreiten.
Bei Interesse senden Sie uns doch einfach Ihr Profil im Word-Format oder als pdf unter Angaben Ihres bestmöglichen all in Stundensatz an
Für Fragen stehen wir Ihnen selbstverständlich gerne zur Verfügung.
Mit freundlichen Grüßen
Partnermanager: Janek Strauß
Tel:
Email: