Senior Databricks Engineer

🔥 vor 11 Stunden

🏛️ District of Columbia, Washington – Remote

🏛️ District of Columbia – Remote ☕ Washington – Remote

⏰ Vollzeit

🟠 Senior

👷🏻‍♀️ Ingenieur

👻 Geisterscore 10%

Was es bedeutet: die Wahrscheinlichkeit, dass für diese Stelle niemand wirklich einstellt.So liest du es: 60 % oder höher heißt, wir halten das für einen Geisterjob. Niedrigere Werte sind weniger bedenklich.Warum dieser Wert:

• Gerade erst veröffentlicht.
• Stellen bei diesem Unternehmen werden meist in 27 Tagen besetzt.
• Kein Gehalt angegeben.

Jetzt Bewerben

Ähnliche Remote-Jobs finden

Koniag Government Services

WebsiteLinkedInAlle Stellen

1001 - 5000 Mitarbeiter

Gegründet 1975

🏛️ Regierung

🎖️ Verteidigung

💼 Beratung

Government • Defense • Consulting

Koniag Government Services ist eine Alaska Native Corporation (ANC), die technische, professionelle und operationelle Expertise für den öffentlichen Sektor in den USA bereitstellt. KGS unterstützt Kunden aus Verteidigung & Nachrichtendiensten, Bundesverwaltungen und dem Gesundheitswesen mit Unternehmenslösungen, professionellen Dienstleistungen und Betriebsmanagement. Dabei legt sie einen Fokus auf ergebnisorientierte Missionen, schnelle Vertragsabschlüsse (ANC-Direktvergaben) sowie strategische/technologische Partnerschaften. Das Unternehmen positioniert sich als Missionspartner, der Mitarbeiter, Technologien und Programmmanagement für Regierungskunden liefert.

Beschreibung

• Design, develop, and deploy scalable data infrastructure • Drive key data engineering initiatives supporting the Department of State’s “4Ps” data lake • Collaborate with project managers, team members, and business owners to gather requirements and communicate progress • Architect and implement scalable, highly available Databricks data pipelines using the Medallion Architecture • Establish data quality standards and monitoring dashboards • Write production-ready PySpark and SQL code for complex ETL/ELT processes • Develop DLT and structured streaming pipelines • Build data ingestion pipelines using RESTful API integrations • Implement infrastructure and pipelines as code • Automate deployments across Development, Staging, and Production using DABs and Azure DevOps • Develop, package, and maintain reusable custom Python libraries and modules • Apply data warehousing concepts including dimensional modeling and slowly changing dimensions • Monitor, troubleshoot, and optimize Databricks clusters and Spark jobs • Share data securely with external BI tools such as PowerBI and SAP BusinessObjects • Develop dashboards and capabilities natively within Databricks • Serve as a technical SME, conduct code reviews, establish best practices, and mentor staff

🎯 Anforderungen

• Active SECRET clearance • Knowledge of Object Oriented Programming (OOP) concepts • Proficiency in one or more programming or scripting languages: Java, C#, Python, JavaScript, or PowerShell • 8+ years of dedicated Data Engineering experience • At least 3+ years functioning in a senior capacity focused on the Databricks ecosystem • Expert-level proficiency in PySpark and complex SQL • Proven ability to create, package, and manage custom Python libraries, including building Wheel files • Deep understanding of HTTP REST methods, with hands-on experience extracting, paginating, and processing data from external API sources • Deep theoretical and practical understanding of modern Data Warehousing concepts • Hands-on experience building the Medallion Architecture • Proven experience automating Databricks deployments • Hands-on experience configuring and deploying Databricks Asset Bundles (DABs) using Azure DevOps, including creating YAML pipelines, managing service principals, and handling multi-workspace deployments • Strong familiarity with Azure Data Lake Storage Gen2 and Azure Key Vault • Proficiency with Git-based version control workflows • Concise and comprehensive written and oral communication skills for technical understanding and customer usage support

🏖️ Vorteile

• Medical, dental, and vision insurance • 401(k) retirement plan • Paid time off • Paid parental leave • Life and disability insurance • Flexible spending accounts • Commuter benefits • Tuition reimbursement

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen