Senior Data Engineer – GCP, Python, Iceberg, Delta Lake, Kafka, Snowflake, Databricks

🕒 Agosto 20

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $119.998 - $180.000 / ano

⏰ Tempo Integral

🟠 Sênior

🚰 Engenheiro de Dados

👻 Score fantasma 2%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Railroad19

SiteLinkedInTodas as Vagas

51 - 200 funcionários

☁️ SaaS

🏢 Corporativo

SaaS • Enterprise • Software Development

Railroad19 é uma empresa especializada em desenvolvimento de software, com sede em Saratoga Springs, Nova York. Eles se concentram no desenvolvimento de soluções de software personalizadas e plataformas em nuvem para diversas indústrias, incluindo mídia, finanças, mercados de energia, entre outras. Com uma equipe de desenvolvedores e arquitetos qualificados, a Railroad19 oferece desenvolvimento de aplicações em nível empresarial e integração perfeita com sistemas existentes para empresas da Fortune 500. A empresa se orgulha de ter um processo de contratação altamente seletivo para garantir os melhores talentos e quase perfeita retenção de funcionários. Sua expertise tecnológica abrange uma ampla gama de linguagens de programação e frameworks, enfatizando soluções críticas adaptadas às necessidades dos clientes.

Descrição

• Design and implement the UniForm write layer with Delta and Iceberg dual metadata • Build GCS to BigQuery ingestion pipelines for structured operational datasets • Develop and implement solutions in Python and Spark • Implement Kafka-based CDC patterns for real-time and near-real-time ingestion • Develop data lineage, dependency tracking, and modular adapter code • Configure Snowflake Horizon external tables for zero-copy reads • Write data hub tables once using Delta Lake with Iceberg UniForm enabled for consumption by target platforms without conversion • Implement and certify Delta Sharing endpoints for Databricks consumers • Build governed access layer components including RBAC, connector registry entries, and tenant-scoped authorization • Align semantic layer models with LookML and KPI catalog definitions • Collaborate with cross-functional teams to deliver end-to-end features • Troubleshoot issues across the full stack and contribute to code quality • Design reusable data-sharing adapters connecting BigQuery-backed data products to Snowflake and Databricks

🎯 Requisitos

• 6+ years of proven enterprise-level experience in Python & Spark • Advanced experience in GCP BigQuery • Strong working knowledge of Apache Iceberg, Delta Lake, and Iceberg UniForm • Experience with Delta Sharing and Kafka / CDC pipelines • Specific work experience in Snowflake Horizon Catalog and Databricks Unity Catalog • Solid experience with data lake architecture and ingestion pipeline design • Excellent communication skills and ability to work cohesively with multiple teams • Prior delivery in enterprise SaaS, media, or advertising technology (nice to have) • Active daily use of AI-assisted development tools; Claude Code preferred (nice to have)

🏖️ Benefícios

• Medical insurance • Dental insurance • Vision insurance • Pet insurance • Paid Time Off • 401(k) • Competitive compensation • 100% remote work • Full-time employment