Senior Databricks Engineer

🕒 vor 2 Monaten

🔔 Pennsylvania – Remote

🔔 Pennsylvania – Remote

💵 $135.000 - $185.000 / Jahr

⏰ Vollzeit

🟠 Senior

👷🏻‍♀️ Ingenieur

Jetzt Bewerben

Ähnliche Remote-Jobs finden

E-Mail-Benachrichtigung für neue Jobs einrichten

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen

HIKE2

WebsiteLinkedInAlle Stellen

51 - 200 Mitarbeiter

💼 Beratung

🤖 Künstliche Intelligenz

📋 Compliance

Consulting • Artificial Intelligence • Compliance

HIKE2 ist ein Technologieberatungsunternehmen, das sich darauf spezialisiert hat, Kunden in regulierten Branchen dabei zu unterstützen, neue Technologien zu nutzen, um Chancen und Effizienzen zu beschleunigen. Das Unternehmen bietet fachkundige Beratungsdienste an der Schnittstelle von Technologie, regulatorischer Konformität und strategischem Wachstum. HIKE2 befähigt Branchen wie Anwaltskanzleien, Finanzdienstleister, Versicherungsunternehmen, Anbieter von Unternehmensdienstleistungen und High-Tech-SaaS-Unternehmen durch maßgeschneiderte Technologielösungen, die komplexe Herausforderungen adressieren und Engagement, Effizienz und Wachstumsziele verbessern. Zu ihren Dienstleistungen gehören Künstliche Intelligenz, Daten & Analytik, Cloud-Lösungen und Salesforce mit einem Fokus auf ganzheitliche Compliance-Strategie, ethische Innovation und strategische Wachstumsinitiativen.

Beschreibung

• Design and build large-scale data platforms on Databricks (Delta Lake, Spark, Unity Catalog) in Azure • Develop and maintain batch and streaming data pipelines for high-volume, complex data sources • Implement medallion/lakehouse architectures from the ground up in greenfield environments • Build and optimize data models to support analytics, reporting, and downstream applications • Integrate Databricks with enterprise systems (APIs, event streams, warehouses, ML workflows) • Tune Spark jobs and pipelines for performance, reliability, and cost at scale • Support production deployments, including CI/CD pipelines, testing, and release management • Partner directly with enterprise clients to translate requirements into working technical solutions • Collaborate with architects, engineers, and data scientists across multiple workstreams • Balance speed and quality, knowing when to move fast and when to harden solutions • Make pragmatic decisions in ambiguous, evolving environments (especially greenfield builds) • Contribute hands-on while also guiding design and approach across the team • Communicate tradeoffs clearly to both technical and non-technical stakeholders • Work within modern engineering practices (version control, code reviews, automated testing) • Demonstrated ability to mentor and guide data engineers and analysts

🎯 Anforderungen

• Deep Databricks-native expertise, including experience architecting and implementing end-to-end lakehouse solutions that run primarily or entirely on Databricks. • Advanced experience with modern Databricks architecture patterns, including declarative pipelines / Delta Live Tables, Unity Catalog, Delta Lake, workflow orchestration, governance, performance tuning, and operational monitoring. • Familiarity with infrastructure-as-code (Terraform, Bicep), environment provisioning, and CI/CD automation (Github, Azure DevOps) for Databricks-based platforms. • Strong learning agility, technical curiosity, and comfort using AI-enabled development workflows or automation tools to accelerate delivery and improve quality. • Familiarity with other modern cloud data architectures and tools, including cloud-native data warehouses (Snowflake, BigQuery, Redshift), data lakes, orchestration frameworks (Airflow/Astronomer), transformation tools (dbt), catalog/governance platforms, and scalable batch or streaming data processing services (Kafka, Kinesis).

🏖️ Vorteile

• medical • dental • vision • 401k • holiday pay • vacation • personal and family sick leave • and more.