Senior Data Engineer

🕒 vor 2 Monaten

⏰ Vollzeit

🟡 Mittelstufe

🟠 Senior

🚰 Dateningenieur

🗣️🇺🇸🇬🇧 Englisch erforderlich

Airflow

BigQuery

Cloud

ETL

PySpark

Python

Spark

SQL

Woher diese Stelle stammt

Veröffentlicht auf der Karriereseite von Sigma Software Group ↗der Karriereseite von Sigma Software Group, nicht über eine Jobbörse

Von Remote Rocketship zum ersten Mal gesehen vor 2 Monaten

Noch offen auf der Website von Sigma Software Group. GeprĂźft vor 6 Stunden.

Jetzt Bewerben
Logo of Sigma Software Group

Sigma Software Group

1001 - 5000 Mitarbeiter

GegrĂźndet 2002

💼 Beratung

🏥 Gesundheitswesen

🚘 Automobilindustrie

Consulting • Healthcare • Automotive

Die Sigma Software Group ist ein multinationales Unternehmen, das 2002 gegründet wurde und sich auf hochwertige Softwareentwicklung, Grafikdesign, Testing und Support-Services spezialisiert hat. Das Unternehmen liefert Lösungen für unterschiedlichste Branchen, darunter Automotive, Telekommunikation, Luftfahrt, Werbung, Gaming, Banking, Immobilien und Gesundheitswesen. Sigma Software fördert die berufliche Weiterentwicklung, bietet weltweit Remote-Work-Möglichkeiten und betreut renommierte Kundinnen und Kunden wie AstraZeneca, Scania und SAS. Das Unternehmen legt Wert auf eine Kultur der kontinuierlichen Weiterbildung, des Mentorings und flexibler Arbeitsumgebungen – und ist damit ein bevorzugter Arbeitgeber für IT-Spezialistinnen und -Spezialisten, die an komplexen Lösungen mit Cutting-Edge-Technologien arbeiten möchten. Sigma Software steht für innovative Lösungen und gestaltet die Zukunft des Engineerings mit – und engagiert sich zugleich gesellschaftlich, unter anderem durch karitative Arbeit in der Ukraine.

Beschreibung

• Verfassen und verteidigen Sie diagnostische SQL-Abfragen für umfangreiche Produktionsdatensätze • Entwickeln und pflegen Sie Ingestion-Pipelines für Bid-, Win- und Impression-Logs in BigQuery • Harmonisieren Sie Felder über unabhängig entwickelte Datensätze hinweg und pflegen Sie versionierte Feldzuordnungen • Entwickeln Sie zum jeweiligen Zeitpunkt korrekte Feature-Tabellen und Aggregations-Pipelines • Konzipieren und pflegen Sie Conversion- und Labeling-Pipelines unter Berücksichtigung verzögert verfügbarer Labels • Verantworten Sie den Write Path für die Datenbereitstellung, Schema-Verträge, Publishing-Prozesse und Freshness-SLOs • Entwickeln Sie eine Infrastruktur für Experimente, einschließlich Traffic-Splitting und Reporting-Pipelines • Führen Sie umfangreiche historische Backfills und eine sichere erneute Verarbeitung nach Änderungen an Feldzuordnungen durch • Implementieren Sie Maßnahmen zur Datenisolierung und sicheren Aggregation zum Schutz von Werbekundendaten • Entwickeln Sie automatisierte Frameworks zur Validierung der Datenqualität • Arbeiten Sie eng mit Customer Engineers zusammen und erstellen Sie Betriebsdokumentation • Beteiligen Sie sich an Architekturentscheidungen und an der Verbesserung der Plattformskalierbarkeit

🎯 Anforderungen

• Mindestens 5 Jahre Berufserfahrung im Data Engineering • Mindestens 2 Jahre Erfahrung mit produktiven ML- oder umfangreichen Analytics-Pipelines • Hervorragende SQL-Kenntnisse, einschließlich Window Functions und inkrementeller Verarbeitung • Sehr gute Python-Kenntnisse für die Entwicklung produktionsreifer Pipelines • Praktische Erfahrung mit Spark oder PySpark • Erfahrung in der Entwicklung von ETL-/ELT-Pipelines mit Airflow, Cloud Composer, Dagster oder vergleichbaren Tools • Erfahrung mit Cloud Data Warehouses im großen Maßstab, vorzugsweise BigQuery • Ausgeprägtes Verständnis von Datenmodellierung und zeitpunktbezogener Korrektheit • Erfahrung mit ereignisgesteuerten oder Clickstream-Datensätzen im sehr großen Maßstab • Erfahrung in der Betreuung geschäftskritischer Produktions-Pipelines • Englischkenntnisse auf dem Niveau B2 oder höher

🏖️ Vorteile

• Möglichkeit zur Arbeit im Homeoffice • Möglichkeit, an wirkungsvollen globalen Produkten zu arbeiten • Zusammenarbeit mit erfahrenen Engineers • Möglichkeit, Architekturentscheidungen mitzugestalten • Möglichkeit, Fachkenntnisse in umfangreichen verteilten Systemen und modernen Datenplattformen auszubauen

Jetzt Bewerben

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung ßberprßfen.

Ähnliche Jobs

🕒 vor 2 Monaten

M&M Software GmbH

201 - 500

💼 Beratung

📣 Marketing

📦 Logistik

Senior Data Engineer zur Entwicklung skalierbarer DatenlĂśsungen mit Databricks, Spark und Python. UnterstĂźtzung der Kunden von M&M Software bei der digitalen Transformation durch governte, produktionsreife Datenprodukte.

🗣️🇺🇸🇬🇧 Englisch erforderlich

🕒 vor 2 Monaten

PROMOS consult

201 - 500

💼 Beratung

📦 Logistik

🏥 Gesundheitswesen

SAP-Spezialist (m/w/d) fĂźr Datenmigration und Entwicklung fĂźr S/4HANA-Migrationen sowie ABAP-Anwendungen. Entwicklung digitaler SoftwarelĂśsungen fĂźr die Wohnungs-, Bau- und Immobilienwirtschaft bei PROMOS consult.

🕒 vor 2 Monaten

Rhenus Logistics

10.000+ Mitarbeiter

🚘 Automobilindustrie

💼 Beratung

🏥 Gesundheitswesen

Azure Data Engineer zum Aufbau und zur Optimierung der Azure-Datenplattform von Rhenus Overland Transport. Entwicklung von LĂśsungen mit Databricks, PySpark, ETL/ELT, Infrastruktur und CI/CD.

🗣️🇺🇸🇬🇧 Englisch erforderlich

🕒 vor 2 Monaten

Kaufland e-commerce

501 - 1000

🛍️ eCommerce

🏪 Marktplatz

🤝 B2B

Senior DevOps Engineer fßr den Betrieb von Kafka-, Kubernetes- und CDC-Infrastrukturen. Sie unterstßtzen Kauflands internationale Online-Marktplätze durch zuverlässige Datenplattformen und Automatisierung.

🗣️🇺🇸🇬🇧 Englisch erforderlich

🕒 vor 2 Monaten

Hypoport SE

1001 - 5000

🛡️ Versicherung

🏥 Gesundheitswesen

💼 Beratung

Data Engineer für den Aufbau skalierbarer Datenpipelines und von Lending-Datenprodukten für Europace, Deutschlands größte Transaktionsplattform für Immobilienfinanzierungen. Sie schaffen die Grundlage für Reporting, Analytics, KI und Automatisierung.

Airflow

Python

SQL

Entwickelt von Lior Neu-ner. Ich freue mich über Ihr Feedback — kontaktieren Sie mich per DM oder per E-Mail support@remoterocketship.com
Follow Remote Rocketship on LinkedInFollow Remote Rocketship on InstagramFollow Remote Rocketship on FacebookFollow Remote Rocketship on TikTok