Engenheiro de Dados GCP - Sênior

🕒 Julho 29

🇧🇷 Brasil – Remoto

⏰ Tempo Integral

🟠 Sênior

🚰 Engenheiro de Dados

🗣️🇺🇸🇬🇧 Inglês obrigatório

De onde vem esta vaga

Publicada na página de carreiras da Leega ↗página de carreiras da Leega, não em um site de vagas

Vista pela primeira vez pelo Remote Rocketship Julho 29

Ainda aberta no site da Leega. Verificada 4 horas atrás.

Candidatar-se
Logo of Leega

Leega

201 - 500 funcionários

Fundada em 2010

💼 Consultoria

📣 Marketing

🔌 API

Consulting • Marketing • API

A Leega é uma provedora líder de soluções de tecnologia na América Latina, especializada em analytics de dados e soluções em nuvem. Primeira empresa na região certificada pelo Google Cloud em Data Analytics, a Leega oferece um portfólio de serviços que inclui desenvolvimento de aplicações, machine learning e analytics para gestão de riscos. A empresa faz parcerias com os principais provedores de nuvem, como AWS e Microsoft Azure, para ajudar as empresas a aprimorar a gestão de dados e realizar uma migração eficiente para a nuvem, impulsionando a transformação digital e a inovação.

Descrição

• Realizar engenharia reversa de lógicas complexas escritas em PySpark, traduzindo-as para SQL nativo e otimizado no BigQuery; • Operar ferramentas de IA para acelerar a conversão de pipelines de dados e automatizar testes; • Modernizar e construir fluxos de ingestão substituindo ferramentas legadas por serviços nativos do GCP (Datastream, Dataflow, Cloud Run) orquestrados pelo Cloud Composer; • Gerenciar e otimizar dados no formato Apache Iceberg integrados via BigLake, garantindo performance e controle de custos; • Criar e executar frameworks de testes automatizados para validar a equivalência volumétrica, chaves de negócio e agregações entre o ambiente legado e o novo; • Contagem de linhas: Verificação por tabela e por partição; • Reconciliação por chave de negócio: Comparação direta dos registros entre a origem (Spark) e o destino (BigQuery); • Checksum/Hash: Agregação das colunas relevantes para garantir a integridade dos dados; • Validação de agregações-chave: Conferência de somas, contagens distintas, mínimos e máximos utilizados nos indicadores de negócio.

🎯 Requisitos

• Forte experiência em Google Cloud Platform, especialmente BigQuery, GCS e Cloud Composer (Airflow), com pelo menos 6 anos de experiência profissional; • Sólido domínio técnico em SQL avançado e Python/PySpark, com pelo menos 6 anos de experiência profissional; • Experiência prática com formatos de dados abertos (Open Table Formats), especificamente conversão e manipulação de Apache Iceberg e Delta; • Conhecimento em orquestração de transformações de dados utilizando Dataform ou dbt; • Capacidade de resolver problemas complexos de performance e schema evolution em cenários de alta volumetria (escala de terabytes).

🏖️ Benefícios

• PcD

Candidatar-se

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Vagas Similares

🕒 Julho 27

ROIT

51 - 200

💼 Consultoria

⚖️ Jurídico

☁️ SaaS

Tech Lead liderando a evolução de uma plataforma de dados escalável na ROIT, definindo arquitetura, padrões de engenharia e promovendo o crescimento da equipe.

🕒 Julho 25

iblue

51 - 200

💼 Consultoria

🏥 Saúde

🛡️ Seguros

Engenheiro(a) de Dados Sênior responsável por construir e otimizar pipelines de dados na iblue Consulting. Colaboração com equipes multidisciplinares para impulsionar o crescimento do negócio e aprimorar a modelagem de dados.

🕒 Julho 22

Lumini IT Solutions

51 - 200

💼 Consultoria

🏥 Saúde

📦 Logística

Engenheiro de Dados atuando na construção e integração de pipelines em ambientes Azure e AWS. Responsável pela implementação de soluções de dados em um programa de inovação e modernização.

🕒 Julho 13

Dadoteca

51 - 200

💼 Consultoria

🏥 Saúde

📣 Marketing

Engenheiro(a) de Dados Sênior atuando no desenvolvimento de projetos de dados utilizando soluções Azure e Databricks. Colabora com squads para implementar soluções técnicas e otimizar rotinas de processamento em Python.

🕒 Julho 10

Dadoteca

51 - 200

💼 Consultoria

🏥 Saúde

📣 Marketing

Engenheiro(a) de Dados Sênior atuando em sustentação de projetos de dados com forte conhecimento técnico e perfil proativo. Contribuindo para a evolução de soluções e melhoria contínua dos processos.

Desenvolvido por Lior Neu-ner. Adoraria receber seu feedback — entre em contato por DM ou pelo e-mail support@remoterocketship.com
Follow Remote Rocketship on LinkedInFollow Remote Rocketship on InstagramFollow Remote Rocketship on FacebookFollow Remote Rocketship on TikTok