Senior Data Engineer

🕒 Agosto 17

🇺🇸 Estados Unidos – Remoto (EUA)

⏰ Tempo Integral

🟠 Sênior

🚰 Engenheiro de Dados

👻 Score fantasma 15%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

540

SiteLinkedInTodas as Vagas

51 - 200 funcionários

💼 Consultoria

📦 Logística

🏛️ Governo

Consulting • Logistics • Government

A 540 é uma empresa de consultoria em tecnologia que faz parceria com o Governo Federal e clientes empresariais para impulsionar a inovação e romper barreiras. A empresa é especializada em estratégia de tecnologia, entrega ágil, design e desenvolvimento de APIs, análise de dados e serviços em nuvem. A 540 ajuda seus clientes aproveitando tecnologias e designs de ponta, criando experiências de usuário impactantes e entregando código de alta qualidade. Com foco em DevSecOps, gerenciam e dimensionam infraestrutura de forma segura à medida que as organizações crescem. Os serviços da 540 capacitam desenvolvedores, integradores e consumidores de dados por meio de melhores práticas em APIs e soluções em nuvem. Seu compromisso se estende a ajudar o governo na implementação de soluções tecnológicas avançadas, particularmente em estratégia de APIs e aplicativos orientados por dados.

Descrição

• Design, develop, and maintain scalable, production-ready data pipelines and data products using Spark (Python/SQL) in a Databricks environment • Lead integration and transformation of complex data from diverse DoW and federal health systems into reliable, reusable data products • Design scalable data ingestion, integration, and exchange approaches, including API-based integrations and services • Establish reusable data engineering patterns, standards, and best practices • Provide technical guidance on data architecture, pipeline design, data modeling, integration approaches, and engineering practices • Monitor, troubleshoot, and optimize production workflows and data pipelines • Define and implement data validation, quality, and governance practices • Troubleshoot complex technical and data integration challenges and drive sustainable solutions • Collaborate with engineers, architects, analysts, and customer stakeholders on scalable technical solutions • Mentor engineers and guide teams through complex technical challenges • Improve engineering tools, processes, and patterns and drive their adoption • Own complex technical areas and maintain engineering quality as the platform grows

🎯 Requisitos

• 10+ years of data engineering, software engineering, or related technical experience • Extensive hands-on experience designing, building, and operating production data pipelines and data products • Advanced proficiency with Python and SQL • Strong experience with Apache Spark and distributed data processing • Experience with Databricks or similar modern data platforms • Experience designing and maintaining ETL/ELT processes for complex, large-scale datasets • Experience integrating data across disparate systems and consuming or developing API-based data integrations • Strong understanding of data modeling, data architecture, data quality, and data governance principles • Experience troubleshooting and optimizing complex production data pipelines • Experience with Git-based development workflows and modern software engineering practices • Experience working in terminal / command-line environments • Demonstrated experience providing technical guidance, mentoring engineers, and influencing engineering practices • Strong client and stakeholder communication skills • Ability to independently navigate ambiguity, identify technical risks, and resolve complex engineering challenges • Experience identifying security, privacy, and compliance issues and working with security/compliance/legal stakeholders • Candidates must be U.S. Citizens with an active DoW Secret (or higher) clearance • Bachelor’s Degree in Computer Science, Engineering, Data Science, or a related technical field (preferred) • Nice-to-have: AWS cloud experience; very large datasets; Palantir Foundry; GitLab; Advana or similar DoW data environments; federal health, financial, or other regulated data; AI/ML tools

🏖️ Benefícios

• Flexible PTO + all Federal holidays off • Health, dental and vision insurance plans • Flexible Spending Account (FSA) • 401k with employer match • Company-sponsored life insurance, short- and long-term disability • Professional development (training, certifications, conferences) • Paid cloud developer accounts • Referral bonuses • HQ office perks (parking / metro reimbursement, nitro coffee & lunches) • Annual social events (540 Week, hackathon, charity golf tournament, etc.) • Access to 540’s Washington Capitals & Nationals tickets