Data Engineer, Databricks

🕒 Setembro 17

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $112.000 - $179.000 / ano

⏰ Tempo Integral

🟡 Pleno

🟠 Sênior

🚰 Engenheiro de Dados

🦅 Patrocina Visto H1B

Esta empresa já patrocinou vistos H1B no passado.

👻 Score fantasma 3%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Peraton

SiteLinkedInTodas as Vagas

10.000+ funcionários

💼 Consultoria

🏥 Saúde

📦 Logística

Consulting • Healthcare • Logistics

A Peraton é uma empresa focada em missões que apoia iniciativas de segurança nacional por meio de serviços avançados de TI e cibernéticos. Eles oferecem capacidades em áreas como defesa cibernética, operações em nuvem, engenharia e inteligência. Com um compromisso em resolver desafios complexos, a Peraton integra tecnologias baseadas em dados para garantir o sucesso das missões de seus clientes militares e governamentais.

Descrição

• Build out and configure a dedicated Government workspace within the existing Databricks environment • Design and implement data ingestion pipelines from core agency business systems, including financial, HR, CRM, and ITSM systems • Leverage native/built-in connectors where source systems support them and design custom integration approaches for legacy systems • Normalize and prepare ingested data within Databricks for downstream visualization/reporting tools • Implement Databricks Unity Catalog for centralized data governance, metadata management, active auditing, and end-to-end lineage tracking • Review current configuration, assess security controls for CUI/PII/PHI/financial data, and implement improvements • Develop comprehensive as-built documentation, including physical/logical architecture diagrams, automated data dictionaries, and SOPs • Document data sources, integration methods, and data lake architecture decisions to support sustainment

🎯 Requisitos

• 5 years work experience with BS/BA; 3 years with MS/MA • US Citizenship • Active DoD Secret clearance • 2 years working on the Databricks platform • Strong proficiency in PySpark, Spark SQL, and Python for large-scale data processing and pipeline development • Hands-on experience with Unity Catalog administration, including metastore management, access policies, and data lineage • Experience with pipeline orchestration tools (Airflow, Databricks Workflows) • Experience with Delta Lake, schema evolution, time travel, and optimization techniques • Experience integrating heterogeneous enterprise systems, including legacy/custom integrations • Familiarity with cloud platforms (Azure/AWS) and infrastructure-as-code practices • Understanding of data governance principles, compliance frameworks, and CUI/PII handling practices • Familiarity with financial, HR, CRM, or ITSM data structures • Git/CI-CD pipeline experience • DoD 8570 certification

🏖️ Benefícios

• Potential eligibility for overtime • Potential eligibility for shift differential • Potential eligibility for a discretionary bonus