Engenheiro(a) de Dados Sênior

Vaga não está no LinkedIn

🔥 56 minutos atrás

🇧🇷 Brasil – Remoto

⏰ Tempo Integral

🟠 Sênior

🚰 Engenheiro de Dados

👻 Score fantasma 10%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Nerdy

SiteLinkedInTodas as Vagas

501 - 1000 funcionários

📚 Educação

🤖 Inteligência Artificial

☁️ SaaS

💰 $150.000.000 Post-IPO Equity - Nerdy em 2021-09

Education • Artificial Intelligence • SaaS

A Nerdy é uma empresa de tecnologia educacional que combina instrução ao vivo (através da Varsity Tutors) com ferramentas de aprendizado impulsionadas por IA em uma plataforma construída com esse propósito. Oferece tutoria ao vivo 1-para-1, aulas semanais de preparação, workshops, reprodução instantânea de sessões e recursos de IA, como resumos de sessões, diagnósticos adaptativos, um Tutor de IA sob demanda e um Tutor Copilot para mostrar exemplos e exercícios. A plataforma abrange mais de 3. 000 disciplinas e utiliza curadoria de especialistas baseada em dados e correspondência baseada em IA para conectar alunos a tutores bem avaliados e personalizar agentes de prática e estudo.

Descrição

• Ser responsável pelos pipelines e pela plataforma que transportam os dados da Nerdy dos sistemas de origem para um lakehouse governado • Criar e operar a ingestão em streaming e em batch a partir do Kafka e de APIs de terceiros para tabelas Iceberg • Ser responsável por CDC, evolução de schema e dados que chegam atrasados • Operar o lakehouse Iceberg no Starburst Galaxy/Trino, incluindo layout de tabelas, particionamento, compactação, retenção e dimensionamento de clusters • Criar e manter camadas bronze, silver e gold em dbt • Implementar modelos incrementais, merges idempotentes e backfills seguros • Mover a lógica compartilhada para upstream, simplificando os consumidores downstream • Projetar schedules, dependências, tentativas de повторição e alertas no dbt Cloud • Manter os SLAs de atualização dos dados em produção e conduzir incidentes até a causa raiz • Implementar testes de qualidade de dados, contratos, monitoramento de atualização e volume, linhagem e controles de acesso • Tratar dados pessoais identificáveis (PII) respeitando as diretrizes de privacidade e segurança • Otimizar queries, layout de arquivos e uso de clusters para melhorar o desempenho e controlar custos • Gerenciar clusters, armazenamento e acessos por meio de Terraform e CI • Trabalhar em parceria com as equipes de Analytics Engineering, Product Engineering e áreas de negócio na criação de produtos de dados confiáveis • Manter código versionado no Git, revisar pull requests, executar CI/CD e documentar fontes, modelos e runbooks • Utilizar IA para geração e revisão de código, criação de scaffolding de testes, depuração de pipelines, criação de perfis de dados e detecção de anomalias

🎯 Requisitos

• Bacharelado em Ciência da Computação, Engenharia, Matemática/Estatística ou experiência equivalente • Mais de 3 anos de experiência como Engenheiro(a) de Dados ou em função semelhante em ambientes de alto crescimento • Domínio de SQL e conhecimento avançado de Python • Experiência na criação de pipelines de produção autônomos e autorrecuperáveis • Experiência com Iceberg em Trino/Starburst Galaxy ou tecnologias de lakehouse semelhantes, como Delta Lake, Hudi, Spark, Databricks ou Presto/Athena • Experiência com streaming usando Kafka/Confluent ou tecnologias semelhantes, incluindo schema registry, CDC e carregamento idempotente em lakehouse • Proficiência em dbt e dbt Cloud, incluindo modelos incrementais, macros, testes e documentação • Experiência com Airflow ou Dagster • Sólida experiência com AWS, incluindo S3, IAM e catálogos Glue/REST • Experiência com infraestrutura como código usando Terraform ou ferramenta semelhante • Conhecimento de modelagem de dados, particionamento, processamento incremental e estratégias de backfill para grandes volumes de dados • Familiaridade com desenvolvimento baseado em Git e CI/CD • Abordagem disciplinada para revisões de código, releases e plantões de suporte • Experiência com ferramentas de produtividade nativas de IA • Alinhamento com a cultura apolítica e orientada à missão da Nerdy

🏖️ Benefícios

• Remuneração competitiva referenciada em USD, paga na moeda local • Trabalho 100% remoto dentro do seu país de residência; não é necessário se mudar • Folga remunerada flexível • Feriados nacionais oficiais remunerados • Assinatura gratuita e completa de aprendizagem para o colaborador e as pessoas do seu domicílio • Horas de tutoria individual e aulas ilimitadas sob demanda • Acesso aos produtos e serviços educacionais da Nerdy • Acesso a ferramentas de IA de ponta • Treinamentos regulares e revisões entre pares • Cultura colaborativa • Oportunidade de gerar impacto global