Senior Data Engineer

🕒 vor 5 Monaten

Jetzt Bewerben

Ähnliche Remote-Jobs finden

E-Mail-Benachrichtigung für neue Jobs einrichten

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen

Trafilea Tech E-commerce Group

WebsiteLinkedInAlle Stellen

201 - 500 Mitarbeiter

🛍️ eCommerce

🤖 Künstliche Intelligenz

eCommerce • Artificial Intelligence • Marketing

Die Trafilea Tech E-commerce Group ist eine Verbrauchertechnologieplattform der nächsten Generation und eine E-Commerce-Gruppe von Marken. Das Unternehmen wird durch proprietäre Technologie, erstklassiges Marketing und operative Exzellenz angetrieben. Das Trafilea-Ökosystem integriert Daten, Technologie und Systeme, um alle seine Marken zu verbessern, wobei der Fokus auf der Schaffung eines reibungslosen und leistungsstarken Einkaufserlebnisses liegt. Die Gruppe verwaltet eine Echtzeit-Anzeigenverwaltungstechnologie und eine KI-unterstützte Werbeplattform, die hoch effiziente Budgetallokationen und Optimierungen über ihre gesamte Operation hinweg ermöglicht. Trafilea hat mit über 10 Millionen Kunden und 30 Millionen Online-Nutzern einen signifikanten Einfluss und ist damit eine datengesteuerte und technologisch-fähige Größe in der E-Commerce-Branche.

Beschreibung

• Analyse, Design, Implementierung und Wartung von Pipelines, die mithilfe von Cloud-Technologien zuverlässig und effizient geschäftskritische Daten bereitstellen. • Entwicklung neuer ETL-Prozesse (Extract, Transform, Load) unter Verwendung von Apache Airflow als aktuellem Workflow-Management-Tool. • Vorschlagen neuer Initiativen zur Verbesserung von Performance, Skalierbarkeit, Zuverlässigkeit und allgemeiner Robustheit. • Sammeln, Verarbeiten und Bereinigen von Daten aus verschiedenen Quellen mit Python und SQL. • Enge Zusammenarbeit mit leitenden Architekten und Entwicklern, um Best Practices und Richtlinien zu erstellen und deren einheitliche Anwendung in allen Projekten sicherzustellen. • Aufwandsschätzung und effektive Kommunikation für erforderliche Entwicklungsarbeiten. • Erschließung neuer Datenquellen zur Verbesserung neuer und bestehender Datenpipelines. • Verantwortung für Aufbau und Pflege von Datenpipelines und Datenmodellen für neue und bestehende Projekte. • Pflege detaillierter Dokumentation Ihrer Arbeit und Änderungen zur Unterstützung von Datenqualität und Governance. • Gegebenenfalls fachliches Feedback und Experteneinschätzungen zur Unterstützung aller datenbezogenen Initiativen im Unternehmen. • Verbesserung der Qualität bestehender und neuer Datenprozesse (ETL) durch Einbeziehung statistischer Prozesskontrollen und Erstellung von Alarmen bei Anomalien aus Datenquellen in jedem Schritt der Pipeline. • Erstellung von Benchmark-Kontrollen der Ausführungszeiten für jede Pipeline zur Überwachung und Identifikation potenzieller Verfügbarkeitsprobleme.

🎯 Anforderungen

• Mindestens 5 Jahre Erfahrung als Data Engineer, ML Engineer oder in einer ähnlichen Funktion. • Mindestens 5 Jahre Erfahrung in objektorientierter Programmierung und Scripting mit Python. • Umfassende Erfahrung im Erstellen von Datenpipelines und ETL-Prozessen mit modernen Technologien unter Verwendung von Apache Airflow als Haupt-Workflow-Management-Tool. • Mindestens 3 Jahre Erfahrung mit dem AWS-Daten-Ökosystem (S3, Glue, Athena, Redshift, Lambda, EC2, RDS ...). • Erfahrung mit groß angelegten Datenmengen und Techniken zur Abfrageoptimierung mittels SQL. • Erfahrung im Management und Monitoring von Data Lake-Systemen. • Umfangreiche Erfahrung mit Source-Control-Management und CI/CD (z. B. GitHub Actions, GitLab-Pipelines). • Wünschenswert: Erfahrung mit containerisierten Umgebungen (Docker, Kubernetes) in AWS unter Verwendung von EKS/ECS und ECR. • Kenntnisse und praktische Erfahrung mit cloudbasierten Stream-Processing-Systemen. • Praktische Erfahrung mit IaC-Lösungen wie Terraform oder CloudFormation.

🏖️ Vorteile

• Zusammenarbeit mit erstklassigen Talenten in einem datengetriebenen, dynamischen und energiegeladenen Arbeitsumfeld. • Möglichkeit zur fachlichen und persönlichen Weiterentwicklung. • Sicherer Raum, um die eigene Persönlichkeit zu leben, mit einem klaren Bekenntnis zu Diversität, Chancengleichheit und Inklusion. • Offenheit für neue Ideen und Initiativen. • Attraktives Leistungspaket einschließlich Remote-Arbeit, 15 Arbeitstagen bezahltem Urlaub, Weiterbildungszuschuss und mehr!