23 Data Engineer Jobs

Develop, test, deploy, and monitor scalable filter pipelines and transformation processes that extract relevant metrics and features from billions of events, Data management, versioning, etc., in a Data Lake, Implement high-performance ML inference services for critical applications, Collaborate with data scientists and software developers to optimize and scale ML models, Ensure the quality and reliability of developed solutions through monitoring and performance analysis

Design, Implementierung und Optimierung von ETL- und Datenpipelines für Business Intelligence und Analytics Anwendungen, Verantwortung für die Überwachung und Fehlerbehebung bestehender Jobs und die Jobsteuerung, Konzeption und Entwicklung von Datenqualitätsprüfungen zur Sicherstellung der Datenintegrität, Aktive Mitgestaltung der unternehmensweiten Datenplattform der Zukunft auf Basis des Microsoft Azure Stacks, inklusive Migration und Integration neuer Technologien, Zusammenarbeit mit Data Analysts, Data Scientists und internen Kunden in einem spannenden Umfeld

Verantwortung für die Data-Science-Anwendungen, Entwicklung skalierbarer und robuster Datenpipelines zur Sicherstellung von Datenintegrität und -effizienz im Kontext von Machine-Learning-Anwendungen, Implementierung von mittleren und großen Sprachmodellen in die Datensysteme der Deutschen Rentenversicherung, Entwicklung von Python-Anwendungen für Datenimport, ereignisauslösende Prozesse und die Optimierung von ML Ops- und DevOps-Prozessen, Enge Zusammenarbeit mit den Product Ownern und IT-Spezialisten zur Gewährung reibungsloser Prozesse und zuverlässiger Resultate

API-based Data Flows: Automate and manage REST API imports/exports for BigQuery, including both streaming and batch ingestion., Airflow & Pipeline Orchestration: Maintain and optimize our Kubernetes-deployed Airflow environment, ensuring efficient DAG execution., Event-Driven Processing: Manage GCP’s resources as Eventarc and PubSub for event-driven workflows and integration with various services., Cost & Performance Optimization: Optimize BigQuery slot usage, autoscaling, and query performance., Reliability & Security: Implement monitoring, logging, and access controls to ensure data reliability and security.

Trage dazu bei, eine unternehmensweite Datenplattform zu entwerfen und zu pflegen, Erforsche neue Technologien, um das Team bei seiner Mission in den Bereichen Datenmanagement, Analytics und Machine Learning zu unterstützen, Entwerfe, baue und pflege Datenpipelines, um einen zuverlässigen und effizienten Datenfluss über mehr als 100 Quellen und 12 verschiedene Produkte sicherzustellen, Führe schnelle Analysen zu Datenqualitätsproblemen durch, schlage Verbesserungen vor und übernehme Datenmodellierungsaufgaben, um hochwertige Berichte und Analysen zu erstellen, Arbeite mit internen Data Scientists und Software Engineers zusammen, um neue Funktionalitäten in große Datensätze zu entwickeln und zu integrieren, Kommuniziere Fortschritte, Ergebnisse und strategische Empfehlungen an die Führungsebene und andere Stakeholder

Build and maintain data transformations for downstream consumption (ETL, ELT, streaming), Negotiate interfaces between software producers and data consumers, Work with social impact data to portray how education systems evolve over time, Use streaming pipelines and batch processing technologies to handle large amounts of data, Research and learn new technologies to adopt best practices, Collaborate cross-functionally with stakeholders, data scientists, BI analysts, engineers, product owners, and users, Drive the design and implementation of new features, Own data engineering projects from start to end, Manage different portions of critical data infrastructure

Beteiligung am Aufbau eines Datenintegrationszentrums mit dem Ziel der Bereitstellung standardisierter klinischen Daten für die medizinische Forschung zur Verbesserung der Behandlung und Versorgung von Patient*innen, Datenextraktion aus klinischen Primärsystemen, Entwurf, Implementierung und Überwachung von ETL-Prozessen, Integration von heterogenen Daten, Datenharmonisierung, semantische Datenannotationen, Übernahme von Standardterminologien, Aufbau einer nachhaltigen IT-Infrastruktur sowie Entwurf und Etablierung von effizienten Prozessen für das Datenmanagement

Implementierung von Features und Tools zur intuitiven Gestaltung der Data Platform, Entwicklung von IaC und Tools für Deployment und Management der Infrastruktur der Data Platform, Gestaltung der Zukunft der Platform durch Entwicklung und Einbringung eigener innovativer Ideen, Überwachung von Performance sowie Kosten der Platform und der Data Pipelines, und Unterstützung bei der Umsetzung von Optimierungsmöglichkeiten, Unterstützung der Dokumentation von Architektur und Prozessen, Best Practices und Blueprints der Plattform und Teilen des Wissens mit dem Team und den Usern, Zusammenarbeit mit Teamkollegen verschiedener Erfahrungsstufen (z.B. im Pairing) und gegenseitige Unterstützung beim Lernen

Establish best practices, standards, and governance frameworks for SAP Data and AI development, deployment, and monitoring to ensure ethical and responsible usage, Lead workshops with business and IT teams, defining AI-driven strategies and data roadmaps tailored to their needs, Design and implement strategies that leverage SAP Data/Analytics and BTP AI services, Collaborate closely with stakeholders to ensure adherence to the defined guidelines and standards, Stay ahead of the curve with the latest SAP Data, Analytics and AI advancements, Research, evaluate, and recommend Data and AI frameworks, tools, and platforms to build robust and innovative solutions, Stay up-to-date with the latest trends and technologies

Umsetzung der Vertriebsstrategie für den Bereich Data Center, Erarbeitung von Lösungen unter Einbeziehung aller HARTING Produkte und Dienstleistungen, Platzierung sowie aktiver Vertrieb neuer Technologien am Markt, Professionelle Projektverfolgung (extern/intern) sowie Koordination der Kunden des Verantwortungsbereichs, Reporting der Aktivitäten beim Kunden

Unterstützung bei der Inbetriebnahme der autonomen Optimierung durch unserer etaONE®-Plattform im Rahmen der Onboarding-Projekte bei unseren Kunden, Unterstützung bei der Umsetzung von KI-basierten Energiemanagement- und Steuerungsalgorithmen zur Optimierung von Energiesystemen, Automatisierung von Prozessen und Bereitstellung von Tools zur Verbesserung der Effizienz und Skalierbarkeit, Unterstützung bei der Analyse von Energiedaten und der Erstellung von Visualisierungen

Sie arbeiten bei der Entwicklung und Implementierung einer modularen, skalierbaren Datenarchitektur für die Trading-Einheit der MVV mit, Sie sind zuständig für die Implementierung von Python-Skripten zur Datenaufbereitung und -analyse, Sie unterstützen bei der Umsetzung von APIs für ETL-Prozesse sowie von Prozessen zu Qualitätssicherung, Datenaufbereitung und Datenzugriffen, Sie helfen bei der Umsetzung von Prozessautomatisierungen, Visualisierungen und User-Apps (u.a. Django und Streamlit), Sie arbeiten bei der Modellentwicklung auf Basis geeigneter KI-Technologien mit

Als Electrical Engineer "Data Center, Automation and Microgrid" erarbeiten Sie Automationslösungen für Anlagen der Erzeugung, Speicherung und Verteilung von Energie basierend auf unserer eigenen Automatisierungsplattform "Rolls Royce EnergetIQ"., Die Funktionalität des Gesamtsystem wird von Ihnen definiert, dazu kombinieren Sie Einzelkomponenten wie z.B. Dieselaggreate und Batteriespeicher mit eigenen und übergeordneten Steuerungen und SCADA Systemen. Sie verstehen die daraus entstehenden funktionalen und physikalischen Schnittstellen und planen diese in das Gesamtsystem ein., Sie beherrschen die interdisziplinäre Zusammenarbeit in Kundenprojekten und sind bei der Bestandsaufnahme vor Ort das Gesicht zum Kunden. Dazu haben Sie eine fundierte Basis im Projektmanagement und -reporting., Die erarbeiteten und abgestimmten Kundenanforderungen spiegeln sich in ihren Projektierungs- und Planungsunterlagen., Sie sind verantwortlich für das effektive und effiziente Design komplexer Automationslösungen elektrischer Systeme und Energieerzeugungsanlagen. Hierzu zählen auch Design und Planung von notwendigen Netzwerktopologien und Netzwerktechnologien zur internen und externen Datenkommunikation., Sie unterstützen die Ableitung der Software- und Hardwareanforderungen und sind mit Funktionstests der Software in verschiedenen Simulationsumgebungen sowie der Bewertung der Testergebnisse vertraut., Sie bewerten technische Problemstellungen bis hin zur Umsetzung mit entsprechenden Maßnahmen. Die Prüfung und Freigabe von Schaltungsunterlagen liegen dabei in Ihrer Hand., Zu den energietechnischen Anlagen, die Sie leiten, planen und projektieren, zählen u. a. Diesel-Notstromanlagen für Datencenter, Batteriesysteme, PV, Wind und die Kombination in Microgrids und deren Netzanbindung., Sie begleiten als Experte das Projekt bis zur Erstinbetriebnahme und unterstützen als Second-Level-Support für den Service

Analyse von Datensätzen, um Zusammenhänge erkennen und interpretieren sowie die Qualität der Daten bewerten, Bauen und Weiterentwickeln von KI-Modellen (Basis LLM, GPT-Framework) und deren Integration in unsere Produkte unter Beachtung von Skalierungsaspekten, Verfolgen von neusten Entwicklungen in Data Science und Testen neuer Modellierungsansätzen auf ihre Praxistauglichkeit bzw. Einsatzmöglichkeiten, Zusammenarbeit mit anderen Data Scientists, Requirements-, Software- und Data Engineers sowie anderen Stakeholdern in einem flexiblen Umfeld, Gestaltung und kontinuierliche Verbesserung des Entwicklungsprozesses von KI-Lösungen

Design, Entwicklung und Wartung von Datenbanken zur Unterstützung von Geschäftsprozessen, Erstellung, Optimierung und Verwaltung von BI Dashboards und Reports, Analyse und Integration großer Datenmengen aus verschiedenen Quellen, Sicherstellung der Datenqualität und -integrität in allen relevanten Systemen, Zusammenarbeit mit verschiedenen Abteilungen zur Identifikation von Reporting-Anforderungen und Umsetzung von BI-Lösungen, Entwicklung von automatisierten ETL-Prozessen und Implementierung von SQL-Abfragen

Entwicklung und Pflege von Python-Paketen, die Daten- und Businesslogik für prädiktive Energiesteuerung und KI-gestützte Optimierungen in Gebäuden verarbeiten, Pflege und Weiterentwicklung von CI/CD-Pipelines zur Automatisierung und Qualitätssicherung unserer Lösungen, Entwurf und Erstellung skalierbarer ETL-Datenpipelines für die Verarbeitung, Visualisierung und Anomalie-Erkennung von Zeitreihen-Daten für intelligente Energieoptimierung, Enge Zusammenarbeit mit unserem Ingenieursteam und externen Partnern, um innovative Lösungen für den Energiemarkt zu entwickeln und umzusetzen, Langfristige Planung von Feature-Entwicklung und Kosten-Nutzen-Analysen gemeinsam mit Produktverantwortlichen und Management, die die Effizienz unserer Gebäudesteuerungslösungen maximieren

Weiterentwicklung, Modernisierung und Betreuung unserer unternehmensweiten DWH/BI-Systemlandschaft, Umsetzung fachlicher Anforderungen von der Konzeption und Entwicklung zugehöriger DWH/BI-Lösungen bis hin zu deren Test und Produktivsetzung, Konzeption und Umsetzung von ETL-Prozessen, Datenmodellen und Automatisierungsstrecken bis hin zu BI-Reports auf Grundlage hochaggregierter Daten, Unterstützung bei der Migration unserer DWH/BI-Systemlandschaft in die Cloud, von der Konzeption und Durchführung von PoCs bis hin zur erfolgreichen Einführung der Cloud-Lösung

Führe und entwickle das Data Team fachlich weiter und setze klare Zielen und KPIs, Entwickle und implementiere eine zukunftsorientierte Strategie für die Datenintegration und -nutzung in enger Abstimmung mit den Fachbereichen, Baue eine nachhaltige Data Governance auf, um Skalierbarkeit und Qualität sicherzustellen, Treibe die Weiterentwicklung der Business Intelligence und Datenanalyse voran, insbesondere durch Power BI Self-Service und konsistente Datenstrukturen, Fördere eine datengetriebene Unternehmenskultur durch Change Management, Kommunikation, Beratung und Unterstützung der Fachbereiche

Entwicklung interaktiver Dashboards und Berichte mit Power BI zur Unterstützung datengestützter Entscheidungen, Konzeption und Umsetzung von datengetriebenen Anwendungen und Automatisierungen mit Simplifier zur Effizienzsteigerung, Identifizierung von Verbesserungspotenzialen in Geschäftsprozessen durch detaillierte Datenanalyse und Ableitung konkreter Handlungsempfehlungen, Enge Zusammenarbeit mit verschiedenen Teams, um Datenanforderungen zu verstehen und passgenaue Lösungen zu entwickeln, Aktive Beteiligung an der Weiterentwicklung unserer Datenstrategie und dem Einsatz neuer Technologien im Bereich Data Analytics und Low-Code

Entwicklung von sauberem und effizientem Code auf der Grundlage von Spezifikationen und Richtlinien., Entwicklung, Pflege und Nutzung von Deployment-Pipelines (nach dem Paradigma „Infrastructure as Code“)., Aufbau und Bereitstellung von Python-Diensten in Kubernetes., Einrichtung von Automatisierungs- / Testskripten zur Unterstützung von Spezialist*innen bei der Durchführung von Funktions- und Qualitätstests., Behebung von Programmierproblemen und Gewährleistung einer produktiven Arbeitsumgebung., Wartung und regelmäßige Verbesserung der bestehenden Software., Analysieren und Testen vor der Markteinführung., Gewährleistung der Softwaresicherheit durch Entwicklung von Programmen zur aktiven Überwachung der Offenlegung privater Informationen., Entwicklung von Optimierungsmodulen für die Grid Analysis auf der Grundlage vorgegebener Anwender*innen berichte., Teilnahme am 24/7 Bereitschaftsdienst für den Support.