24 Data Engineer Jobs

Analyseinstrumente und -methoden erstellen, weiterentwickeln und dabei auf die Anforderungen der Fachbereiche ausrichten, Analyse und Verknüpfung (REST APIs) von verschiedenen Datenquellen und Insel-Lösungen sowie die effektive Verarbeitung großer Datenmengen, Identifikation geeigneter Algorithmen zur Lösung konkreter Fragestellungen in neuen Bereichen, Erarbeitung neue KI Lösungen mit dem bestehenden Team um Prozesse zu optimieren

Design, Implementierung und Optimierung von ETL- und Datenpipelines für Business Intelligence und Analytics Anwendungen, Verantwortung für die Überwachung und Fehlerbehebung bestehender Jobs und die Jobsteuerung, Konzeption und Entwicklung von Datenqualitätsprüfungen zur Sicherstellung der Datenintegrität, Aktive Mitgestaltung der unternehmensweiten Datenplattform der Zukunft auf Basis des Microsoft Azure Stacks, inklusive Migration und Integration neuer Technologien, Zusammenarbeit mit Data Analysts, Data Scientists und internen Kunden in einem spannenden Umfeld

Develop, test, deploy, and monitor scalable filter pipelines and transformation processes that extract relevant metrics and features from billions of events, Data management, versioning, etc., in a Data Lake, Implement high-performance ML inference services for critical applications, Collaborate with data scientists and software developers to optimize and scale ML models, Ensure the quality and reliability of developed solutions through monitoring and performance analysis

Verantwortung für die Data-Science-Anwendungen, Entwicklung skalierbarer und robuster Datenpipelines zur Sicherstellung von Datenintegrität und -effizienz im Kontext von Machine-Learning-Anwendungen, Implementierung von mittleren und großen Sprachmodellen in die Datensysteme der Deutschen Rentenversicherung, Entwicklung von Python-Anwendungen für Datenimport, ereignisauslösende Prozesse und die Optimierung von ML Ops- und DevOps-Prozessen, Enge Zusammenarbeit mit den Product Ownern und IT-Spezialisten zur Gewährung reibungsloser Prozesse und zuverlässiger Resultate

API-based Data Flows: Automate and manage REST API imports/exports for BigQuery, including both streaming and batch ingestion., Airflow & Pipeline Orchestration: Maintain and optimize our Kubernetes-deployed Airflow environment, ensuring efficient DAG execution., Event-Driven Processing: Manage GCP’s resources as Eventarc and PubSub for event-driven workflows and integration with various services., Cost & Performance Optimization: Optimize BigQuery slot usage, autoscaling, and query performance., Reliability & Security: Implement monitoring, logging, and access controls to ensure data reliability and security.

Build and maintain data transformations for downstream consumption (ETL, ELT, streaming), Negotiate interfaces between software producers and data consumers, Work with social impact data to portray how education systems evolve over time, Use streaming pipelines and batch processing technologies to handle large amounts of data, Research and learn new technologies to adopt best practices, Collaborate cross-functionally with stakeholders, data scientists, BI analysts, engineers, product owners, and users, Drive the design and implementation of new features, Own data engineering projects from start to end, Manage different portions of critical data infrastructure

Implementierung von Features und Tools zur intuitiven Gestaltung der Data Platform, Entwicklung von IaC und Tools für Deployment und Management der Infrastruktur der Data Platform, Gestaltung der Zukunft der Platform durch Entwicklung und Einbringung eigener innovativer Ideen, Überwachung von Performance sowie Kosten der Platform und der Data Pipelines, und Unterstützung bei der Umsetzung von Optimierungsmöglichkeiten, Unterstützung der Dokumentation von Architektur und Prozessen, Best Practices und Blueprints der Plattform und Teilen des Wissens mit dem Team und den Usern, Zusammenarbeit mit Teamkollegen verschiedener Erfahrungsstufen (z.B. im Pairing) und gegenseitige Unterstützung beim Lernen

Beteiligung am Aufbau eines Datenintegrationszentrums mit dem Ziel der Bereitstellung standardisierter klinischen Daten für die medizinische Forschung zur Verbesserung der Behandlung und Versorgung von Patient*innen, Datenextraktion aus klinischen Primärsystemen, Entwurf, Implementierung und Überwachung von ETL-Prozessen, Integration von heterogenen Daten, Datenharmonisierung, semantische Datenannotationen, Übernahme von Standardterminologien, Aufbau einer nachhaltigen IT-Infrastruktur sowie Entwurf und Etablierung von effizienten Prozessen für das Datenmanagement

Establish best practices, standards, and governance frameworks for SAP Data and AI development, deployment, and monitoring to ensure ethical and responsible usage, Lead workshops with business and IT teams, defining AI-driven strategies and data roadmaps tailored to their needs, Design and implement strategies that leverage SAP Data/Analytics and BTP AI services, Collaborate closely with stakeholders to ensure adherence to the defined guidelines and standards, Stay ahead of the curve with the latest SAP Data, Analytics and AI advancements, Research, evaluate, and recommend Data and AI frameworks, tools, and platforms to build robust and innovative solutions, Stay up-to-date with the latest trends and technologies

Umsetzung der Vertriebsstrategie für den Bereich Data Center, Erarbeitung von Lösungen unter Einbeziehung aller HARTING Produkte und Dienstleistungen, Platzierung sowie aktiver Vertrieb neuer Technologien am Markt, Professionelle Projektverfolgung (extern/intern) sowie Koordination der Kunden des Verantwortungsbereichs, Reporting der Aktivitäten beim Kunden

Du entwickelst und implementierst moderne Daten-Architekturen für BI- und Data-Warehouse-Lösungen., Du designst und implementierst leistungsfähige ETL- und Integrationsprozesse, um Daten zuverlässig aufzubereiten und zu transformieren., Du arbeitest eng mit (Kunden-) Fachabteilungen zusammen, erhebst Anforderungen und setzt sie in innovative, passgenaue Lösungen um., Du stellst die Datenqualität sicher, indem du Datenschutz- und Sicherheitsstandards in deine Lösungen integrierst., Du unterstützt Ausschreibungen und trägst zum strategischen Ausbau der Kundenbeziehungen bei.

Unterstützung bei der Inbetriebnahme der autonomen Optimierung durch unserer etaONE®-Plattform im Rahmen der Onboarding-Projekte bei unseren Kunden, Unterstützung bei der Umsetzung von KI-basierten Energiemanagement- und Steuerungsalgorithmen zur Optimierung von Energiesystemen, Automatisierung von Prozessen und Bereitstellung von Tools zur Verbesserung der Effizienz und Skalierbarkeit, Unterstützung bei der Analyse von Energiedaten und der Erstellung von Visualisierungen

Sie arbeiten bei der Entwicklung und Implementierung einer modularen, skalierbaren Datenarchitektur für die Trading-Einheit der MVV mit, Sie sind zuständig für die Implementierung von Python-Skripten zur Datenaufbereitung und -analyse, Sie unterstützen bei der Umsetzung von APIs für ETL-Prozesse sowie von Prozessen zu Qualitätssicherung, Datenaufbereitung und Datenzugriffen, Sie helfen bei der Umsetzung von Prozessautomatisierungen, Visualisierungen und User-Apps (u.a. Django und Streamlit), Sie arbeiten bei der Modellentwicklung auf Basis geeigneter KI-Technologien mit

Als Electrical Engineer "Data Center, Automation and Microgrid" erarbeiten Sie Automationslösungen für Anlagen der Erzeugung, Speicherung und Verteilung von Energie basierend auf unserer eigenen Automatisierungsplattform "Rolls Royce EnergetIQ"., Die Funktionalität des Gesamtsystem wird von Ihnen definiert, dazu kombinieren Sie Einzelkomponenten wie z.B. Dieselaggreate und Batteriespeicher mit eigenen und übergeordneten Steuerungen und SCADA Systemen. Sie verstehen die daraus entstehenden funktionalen und physikalischen Schnittstellen und planen diese in das Gesamtsystem ein., Sie beherrschen die interdisziplinäre Zusammenarbeit in Kundenprojekten und sind bei der Bestandsaufnahme vor Ort das Gesicht zum Kunden. Dazu haben Sie eine fundierte Basis im Projektmanagement und -reporting., Die erarbeiteten und abgestimmten Kundenanforderungen spiegeln sich in ihren Projektierungs- und Planungsunterlagen., Sie sind verantwortlich für das effektive und effiziente Design komplexer Automationslösungen elektrischer Systeme und Energieerzeugungsanlagen. Hierzu zählen auch Design und Planung von notwendigen Netzwerktopologien und Netzwerktechnologien zur internen und externen Datenkommunikation., Sie unterstützen die Ableitung der Software- und Hardwareanforderungen und sind mit Funktionstests der Software in verschiedenen Simulationsumgebungen sowie der Bewertung der Testergebnisse vertraut., Sie bewerten technische Problemstellungen bis hin zur Umsetzung mit entsprechenden Maßnahmen. Die Prüfung und Freigabe von Schaltungsunterlagen liegen dabei in Ihrer Hand., Zu den energietechnischen Anlagen, die Sie leiten, planen und projektieren, zählen u. a. Diesel-Notstromanlagen für Datencenter, Batteriesysteme, PV, Wind und die Kombination in Microgrids und deren Netzanbindung., Sie begleiten als Experte das Projekt bis zur Erstinbetriebnahme und unterstützen als Second-Level-Support für den Service

Analyse von Datensätzen, um Zusammenhänge erkennen und interpretieren sowie die Qualität der Daten bewerten, Bauen und Weiterentwickeln von KI-Modellen (Basis LLM, GPT-Framework) und deren Integration in unsere Produkte unter Beachtung von Skalierungsaspekten, Verfolgen von neusten Entwicklungen in Data Science und Testen neuer Modellierungsansätzen auf ihre Praxistauglichkeit bzw. Einsatzmöglichkeiten, Zusammenarbeit mit anderen Data Scientists, Requirements-, Software- und Data Engineers sowie anderen Stakeholdern in einem flexiblen Umfeld, Gestaltung und kontinuierliche Verbesserung des Entwicklungsprozesses von KI-Lösungen

Design, Entwicklung und Wartung von Datenbanken zur Unterstützung von Geschäftsprozessen, Erstellung, Optimierung und Verwaltung von BI Dashboards und Reports, Analyse und Integration großer Datenmengen aus verschiedenen Quellen, Sicherstellung der Datenqualität und -integrität in allen relevanten Systemen, Zusammenarbeit mit verschiedenen Abteilungen zur Identifikation von Reporting-Anforderungen und Umsetzung von BI-Lösungen, Entwicklung von automatisierten ETL-Prozessen und Implementierung von SQL-Abfragen

Analyse und Bewertung von fachlichen Anforderungen und Unternehmensprozessen, Entwicklung von BI-Konzepten, Zusammenarbeit mit Auftraggebern und Fachbereichen, Modellierung von relationalen und analytischen Datenbankarchitekturen und Aufbau von ETL-Strecken, Umsetzung von Dashboards und Reporting-Anwendungen sowie Übernahme von Inbetriebnahme und Support

Entwicklung und Pflege von Python-Paketen, die Daten- und Businesslogik für prädiktive Energiesteuerung und KI-gestützte Optimierungen in Gebäuden verarbeiten, Pflege und Weiterentwicklung von CI/CD-Pipelines zur Automatisierung und Qualitätssicherung unserer Lösungen, Entwurf und Erstellung skalierbarer ETL-Datenpipelines für die Verarbeitung, Visualisierung und Anomalie-Erkennung von Zeitreihen-Daten für intelligente Energieoptimierung, Enge Zusammenarbeit mit unserem Ingenieursteam und externen Partnern, um innovative Lösungen für den Energiemarkt zu entwickeln und umzusetzen, Langfristige Planung von Feature-Entwicklung und Kosten-Nutzen-Analysen gemeinsam mit Produktverantwortlichen und Management, die die Effizienz unserer Gebäudesteuerungslösungen maximieren

Weiterentwicklung, Modernisierung und Betreuung unserer unternehmensweiten DWH/BI-Systemlandschaft, Umsetzung fachlicher Anforderungen von der Konzeption und Entwicklung zugehöriger DWH/BI-Lösungen bis hin zu deren Test und Produktivsetzung, Konzeption und Umsetzung von ETL-Prozessen, Datenmodellen und Automatisierungsstrecken bis hin zu BI-Reports auf Grundlage hochaggregierter Daten, Unterstützung bei der Migration unserer DWH/BI-Systemlandschaft in die Cloud, von der Konzeption und Durchführung von PoCs bis hin zur erfolgreichen Einführung der Cloud-Lösung

Führe und entwickle das Data Team fachlich weiter und setze klare Zielen und KPIs, Entwickle und implementiere eine zukunftsorientierte Strategie für die Datenintegration und -nutzung in enger Abstimmung mit den Fachbereichen, Baue eine nachhaltige Data Governance auf, um Skalierbarkeit und Qualität sicherzustellen, Treibe die Weiterentwicklung der Business Intelligence und Datenanalyse voran, insbesondere durch Power BI Self-Service und konsistente Datenstrukturen, Fördere eine datengetriebene Unternehmenskultur durch Change Management, Kommunikation, Beratung und Unterstützung der Fachbereiche