Senior Data Engineer

🕒 vor 2 Monaten

Jetzt Bewerben

Ähnliche Remote-Jobs finden

E-Mail-Benachrichtigung für neue Jobs einrichten

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen

Bluefish AI

WebsiteLinkedInAlle Stellen

11 - 50 Mitarbeiter

Gegründet 2024

🤖 Künstliche Intelligenz

🤝 B2B

☁️ SaaS

Artificial Intelligence • B2B • SaaS

Bluefish AI ist ein Technologieunternehmen, das sich auf die Entwicklung fortschrittlicher künstlicher Intelligenzlösungen spezialisiert hat, um Entscheidungsprozesse zu verbessern und die Effizienz in verschiedenen Sektoren zu steigern. Das Unternehmen nutzt innovative Algorithmen und maschinelles Lernen, um datengestützte Einblicke und automatisierte Lösungen für Unternehmen bereitzustellen.

Beschreibung

• Entwerfen, entwickeln und betreiben skalierbarer Daten-Pipelines, die große Datenmengen aus mehreren Quellen und Kanälen aufnehmen, transformieren und validieren. • Verbesserung der Skalierbarkeit, Zuverlässigkeit und Performance unserer Daten-Pipelines zur Unterstützung schnell wachsender Workloads und neuer Datenströme. • Mitwirkung an der Konzeption und Implementierung unserer Data-Lake-Architektur, um zuverlässige Datenspeicherung und teamübergreifende Wiederverwendung zu ermöglichen. • Verwaltung und Optimierung von Daten-Ingest-Workflows, einschließlich Daten aus Web Scrapers, Drittanbietern und internen Systemen. • Überwachung der Pipeline-Gesundheit, Untersuchung von Vorfällen und Implementierung von Verbesserungen zur Steigerung der Systemzuverlässigkeit und Observability. • Unterstützung beim Onboarding und der Integration neuer KI-Kanäle und Datenquellen in die Plattform. • Zusammenarbeit mit Teams im gesamten Unternehmen, um sicherzustellen, dass von verschiedenen Systemen erzeugte Daten effektiv für Analytics und Business Intelligence wiederverwendet werden können. • Identifizierung und Behebung von Performance-Engpässen in verteilten Systemen, einschließlich Rate Limiting, Parallelität und Durchsatzbeschränkungen. • Beratung von Engineering- und Produktteams zu Datenarchitektur, Datenqualität und Best Practices für das Management skalierbarer Daten-Workflows. • Kontinuierliche Evaluierung und Verbesserung unserer Datenplattform zur Unterstützung des schnellen Unternehmenswachstums und sich entwickelnder Produktanforderungen.

🎯 Anforderungen

• Fundierte Erfahrung im Aufbau und Betrieb skalierbarer Daten-Pipelines in Produktionsumgebungen. • Praktische Erfahrung mit Data Lakes oder Data Warehouses (z. B. AWS Athena oder vergleichbare Technologien). • Erfahrung in Daten-Transformation und Datenmodellierung. • Umfangreiche Erfahrung mit AWS. • Erfahrung im Einsatz von Infrastructure-as-Code-Tools zur Verwaltung von Cloud-Infrastruktur. • Sehr gute Kenntnisse in Python für Datenverarbeitung und Automatisierung. • Erfahrung mit verteilten Systemen und der Verwaltung großskaliger Daten-Workflows. • Erfahrung in der Implementierung von Monitoring-, Observability- und Incident-Response-Praktiken für Datensysteme.

🏖️ Vorteile

• Einzigartige Möglichkeit, von Anfang an Teil eines schnell wachsenden Start-ups zu werden, das im Zentrum der KI-Entwicklung arbeitet. • Bewältigung anspruchsvoller und abstrakter Probleme und Mitwirkung an der Disruption der traditionsreichen Mar-Tech-Branche im Wert von 300 Mrd. USD. • Einstieg in ein erfahrenes, leistungsstarkes Team mit direkter Verantwortungsübernahme und spürbarem Einfluss. • Arbeiten in einer echten Meritokratie mit bedeutendem Karrierewachstumspotenzial, wenn das Unternehmen skaliert.