C2S Data Engineer

Die Leistungen werden für den Projekt ART Capacity Management erbracht. Im Rahmen des Kapazitätsmanagements plant der Auftraggeber eine Konzeption, Entwicklung, Wartung und Erneuerung von Anwendungen für die managementgerechte Visualisierung von Kenngrößen, insbesondere bezogen auf die Auslastung im Netz, um die Steuerungsfähigkeit speziell der Bauplanung über alle zeitlichen Horizonte zu verbessern. Dies umfasst neben den ART internen Anwendungen auch die Koordination mit anderen Bereichen zur Bedarfsanalyse sowie der Planung der technischen Umsetzung. Hierbei vor allem die Datenflüsse, Datenaufbereitung, Datenbereitstellung und ggf. weitere Visualisierungen. Ziel des ARTs ist der Aufbau einer Datenplattform als Basis für viele vorhandene Anwendungen und noch zu spezifizierenden UseCases zur Steuerung der Auslastung. Wichtig hierbei ist die Berücksichtigung von Infrastruktur, Fahren und Bauen sowie die Betrachtung von verschiedenen Szenarien. Das Projekt ist nach SAFe organisiert. Die einzelnen Streams und die Produktlieferung arbeiten agil nach SAFe Scrum bei einem zweiwöchigen Iterationszyklus. In diesem Rahmen sind eine Reihe von SAFe üblichen Terminen der jeweiligen Rolle und Projektlage entsprechend zu besuchen. Folgende Leistungen sind zu erbringen: 

• die Entwicklung erfolgt agil nach Scrum
• Programmierung sowie Analyse und Konzeption in Abstimmung mit den fachlichen Verantwortlichen innerhalb des Teams
• Aufbau, Weiterentwicklung und Betrieb der zentralen Datenplattform für das Capacity Management der DB InfraGo
• Arbeit im agilen Entwicklungsteam, Einbringen von Seniorität und Wissen aus dem Bereich ETL und Datawarehousing und damit Unterstützung des (fachlich orientierten) Product Owners
• Austausch mit den Systemarchitekten und weiteren Kolleg:innen im interdisziplinären Team zur Entwicklung eines stabilen und zukunftssicheren Datawarehouses
• Migration von ETL-Strecken/Data Pipelines aus existierenden Anwendungen DWH der DB InfraGo
• Anbindung, Aufbereitung, Verknüpfung, Qualitätssicherung und Bereitstellung von Daten sowie die Abstimmung dieser mit zugehörigen Stakeholdern
• Entwicklung basierend auf einer zukunftsgerichteten und skalierbaren AWS Cloud Plattform
• Analyse und Abstimmung von neuen Datenquellen und Schnittstellen mit dem liefernden System, basierend auf AWS ETL- bzw. Data Flow-Werkzeugen
• Beratung und Einbringen von KnowHow beim Einsatz automatisierter Testverfahren und der Definition von Testcases
• aktive Mitarbeit in der Planung und Umsetzung von neuen Features, Architekturvorgaben sowie der Stabilisierung und Verbesserung bestehender Prozesse & Entwicklungen
• Remote / Onsite: 80% / 20%

Sie erhalten einen unbefristeten Arbeitsvertrag. Die Entlohnung erfolgt nach BAP-Tarif + Zulagen, bei einer geregelten Arbeitszeit von 39 Std/Wo! Durch den Aufbau eines Arbeitszeitkontos ist eine zusätzliche flexible Arbeitszeitplanung möglich!      

• erfolgreich abgeschlossenes Studium im IT- oder Informatikbereich
• mehrjährige Erfahrung in der Implementierung großer Business Intelligence, Data Warehouse Lösungen, inklusive SQL-basierter ETL-Entwicklung und in Grundlagen von Datawarehouse-Strukturen (Historisierung, Key-Generierung, Star- & Snowflake, 3NF), Senior Data Engineer - mindestens 5 Jahre bzw. 2 Projekte - Erfahrung im Lebenslauf nachvollziehbar zu finden
• Erfahrung in der Entwicklung eines Datalakehouses auf dem AWS Stack (Athena, Redshift, Lambda, S3, Secrets Manager, IAM, Python, SQL, AWS Glue), Senior Data Engineer - mindestens 5 Jahre - Erfahrung im Lebenslauf nachvollziehbar zu finden
• Erfahrung in der Datenmigration und Migration von ETL-Strecken von einem DB-System und ETL-Werkzeug zu einem Cloud-basierten Ansatz, Senior Data Engineer - mindestens 5 Jahre bzw. 2 Projekte -   Erfahrung im Lebenslauf nachvollziehbar zu finden
• mehrjährige Erfahrung in der Datenmodellierung von Datawarehouse-Modellen für 3NF und Star-/Snowflake, Senior Data Engineer - Erfahrung aus mindestens zwei Projekten, nicht älter als 2 Jahre
• mehrjährige Erfahrung in der Strukturierung und Vorbereitung (Prototypisieren) sowie Anleitung der Umsetzung bis hin zum Testen/Qualitätssichern im Bereich Datawarehousing & Business Intelligence, Senior Data Engineer - mindestens 5 Jahre - Erfahrung im Lebenslauf nachvollziehbar zu finden
• Erfahrung im Bereich Query-Tuning & Optimierung von Athena und Redshift Abfragen im Zusammenspiel mit einem BI-Tool, vorzugsweise MS Power BI - im Lebenslauf nachvollziehbar, wird im Interview geprüft
• Erfahrung in DevOps Vorgehensmodellen wie git CI/CD Pipelines (mindestens in zwei Projekten) - im Lebenslauf nachvollziehbar, wird im Interview geprüft
• AWS Cloud Erfahrung
• mindestens eine Zertifizierung wie Cloud Practitioner, Developer, DevOps-Engineer oder Solution Architect - im Lebenslauf nachvollziehbar, wird im Interview geprüft 
• Teamfähigkeit
• Kommunikationsfähigkeit
• proaktive Arbeitsweise