Engenheiro de Dados Pleno GCP/DBT

Vaga não está no LinkedIn

🔥 0 minutos atrás

🇧🇷 Brasil – Remoto

⏰ Tempo Integral

🟡 Pleno

🟠 Sênior

🚰 Engenheiro de Dados

👻 Score fantasma 14%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Leega

SiteLinkedInTodas as Vagas

201 - 500 funcionários

Fundada em 2010

💼 Consultoria

📣 Marketing

🔌 API

Consulting • Marketing • API

A Leega é uma provedora líder de soluções de tecnologia na América Latina, especializada em analytics de dados e soluções em nuvem. Primeira empresa na região certificada pelo Google Cloud em Data Analytics, a Leega oferece um portfólio de serviços que inclui desenvolvimento de aplicações, machine learning e analytics para gestão de riscos. A empresa faz parcerias com os principais provedores de nuvem, como AWS e Microsoft Azure, para ajudar as empresas a aprimorar a gestão de dados e realizar uma migração eficiente para a nuvem, impulsionando a transformação digital e a inovação.

Descrição

• Avaliar a arquitetura e os requisitos do data warehouse • Mapear dados, transformações e processos nos serviços GCP, incluindo Cloud Storage, BigQuery e Dataproc • Definir estratégias de migração de dados: full load, incremental e CDC • Elaborar plano de arquitetura de dados no GCP • Projetar esquemas de tabelas no BigQuery considerando performance, custo e escalabilidade • Definir estratégias de particionamento e clustering no BigQuery • Modelar zonas de dados Bronze, Silver e Gold no Cloud Storage • Criar rotinas de transformação usando Dataproc/Spark ou Dataflow para carregar dados no BigQuery • Traduzir lógica de negócios e transformações existentes no GCP • Implementar mecanismos de validação e qualidade de dados • Otimizar consultas BigQuery, jobs Spark no Dataproc e uso de recursos GCP • Implementar segurança de dados em trânsito e em repouso • Definir e aplicar políticas IAM • Garantir conformidade com políticas de governança de dados • Solucionar problemas de desempenho e funcionalidade de pipelines e recursos GCP • Documentar arquitetura, pipelines, modelos de dados e procedimentos operacionais • Comunicar-se com equipe, stakeholders e outras áreas • Garantir comunicação clara sobre arquitetura, componentes de software, evolução e qualidade dos desenvolvimentos • Aplicar metodologias ágeis e utilizar Jira

🎯 Requisitos

• Conhecimento comprovado em DBT por no mínimo 3 anos • Domínio de models (staging, intermediate, marts) • Conhecimento de ref() e source() • Conhecimento de macros (Jinja) • Conhecimento de seeds e snapshots • Conhecimento de testes not null, unique e customizados • Organização em camadas: Staging → Transform → Mart • Profundo conhecimento em BigQuery: modelagem de dados, otimização de consultas, particionamento, clustering, cargas streaming e batch, segurança e governança • Experiência em Cloud Storage: buckets, classes de armazenamento, políticas de ciclo de vida, IAM e segurança • Habilidade em provisionamento, configuração e gerenciamento de clusters Spark/Hadoop no Dataproc • Conhecimento de otimização de jobs e integração com outros serviços GCP • Conhecimento em Dataflow, Composer e DBT para orquestração e processamento de dados • Conhecimento em Cloud IAM e controle de acesso granular • Entendimento de VPC, networking, sub-redes, regras de firewall e segurança em nuvem • Python e PySpark • SQL avançado • Shell Scripting • Git/GitHub/Bitbucket • Conhecimento de metodologias ágeis, seus ritos e proficiência com Jira

🏖️ Benefícios

• Convênio Médico Porto Seguro, com possibilidade de incluir cônjuge e filhos • Convênio Odontológico Porto Seguro para colaboradores e dependentes • Participação nos Lucros e Resultados (PLR) • Auxílio Creche • Vale Alimentação e Refeição Alelo • Auxílio Home Office • Parcerias com Instituições de Ensino, com descontos e incentivos em cursos e graduações • Incentivo para Certificações, inclusive em Cloud (GCP, Azure, AWS, entre outras) • Pontos Livelo • TotalPass • Mindself, com incentivo à meditação e mindfulness • Capacitação constante