Dateningenieur

Stelle nicht auf LinkedIn

vor 2 Monaten

Bewerben

E-Mails mit ähnlichen Jobs erhalten

paiqo

WebsiteLinkedInAlle Stellen

Wir unterstützen unsere Kunden bei der Digitalisierung ihres Unternehmens in den Bereichen Datenplattformen und Künstliche Intelligenz (AI).

11 - 50 Mitarbeiter

Beschreibung

• Aufbau und Betrieb moderner Datenplattformen mit Schwerpunkt auf Data Engineering • Entwicklung skalierbarer Datenpipelines und ETL/ELT-Prozesse auf Microsoft Azure • Entwicklung stabiler Batch- und Streaming-Pipelines mit Azure Data Factory und Databricks/Spark • Sicherstellung der Zuverlässigkeit durch Best Practices wie Delta Lake, automatisierte Workflows und VNet-Absicherung • Übernahme der Verantwortung für Teilprojekte in der Datenintegration, z. B. Einrichtung des Datenpfads von operativen Systemen zu einem Data Lakehouse • Implementierung und Optimierung von ETL/ELT‑Pipelines sowie Sicherstellung der Datenqualität • Nutzung von Azure-Datenservices für Speicherung und Verarbeitung (Data Lake, Azure SQL, Databricks, MS Fabric) • Mitwirkung beim Aufbau von CI/CD‑Pipelines (Azure DevOps oder GitHub) für automatisierte Deployments • Enge Zusammenarbeit mit Data Scientists und Analytics-Teams zur Bereitstellung von Daten für Analytics und Machine Learning

🎯 Anforderungen

• 2–4 Jahre Berufserfahrung im Data Engineering oder in der Entwicklung von Datenplattformen • Fundierte Kenntnisse in SQL sowie Programmierkenntnisse (Python oder Scala) • Erfahrung mit Azure Data Services (z. B. Azure Data Factory, Azure Databricks, Synapse) • Vertrautheit mit Datenmodellierung (z. B. Star Schema, Kimball) • Erfahrung im Monitoring von Datenplattformen und in der Performance-Optimierung • Erfahrung mit Versionsverwaltung (Git) und DevOps-Praktiken (Continuous Integration, Infrastructure as Code) • Kommunikations- und Kollaborationsfähigkeit: Zusammenarbeit mit Data Scientists, Analysten und Kunden sowie die Vermittlung technischer Konzepte für nicht-technische Personen • Problemlösungsfähigkeit & analytisches Denken: Optimierung von Datenströmen, Identifikation von Engpässen und Erarbeitung kreativer Lösungen • Sprachkenntnisse: Deutsch fließend, Englisch gut