(1226) Engenheiro(a) de Dados Sênior

Setembro 20

Candidatar-se

Receber Emails com Vagas Similares

Nearsure

SiteLinkedInTodas as Vagas

Enterprise • SaaS • Artificial Intelligence

A Nearsure é uma empresa especializada em transformação digital, com foco em transformação de negócios com GenAI (IA Generativa), desenvolvimento de jornadas em low-code e otimização de plataformas corporativas. Oferece desenvolvimento de software sob medida, desenvolvimento de produtos e software e soluções de experiência do cliente. A Nearsure é reconhecida por seus serviços de staff augmentation e scale augment, entregando excelência por meio de sua expertise técnica e de hubs regionais de talentos na América Latina. Mantém parcerias com líderes do setor como Microsoft, Adobe, Salesforce e ServiceNow, garantindo acesso antecipado a novos recursos de plataforma. Seu modelo de Studios fomenta a inovação e a estratégia de negócios, com mais de 500 projetos concluídos para empresas Fortune 500, unicórnios de tecnologia, grandes corporações e companhias de médio porte. A Nearsure prioriza relacionamentos de longo prazo com os clientes e está focada em oferecer alto ROI e retenção de talentos.

201 - 500 funcionários

🏢 Corporativo

☁️ SaaS

🤖 Inteligência Artificial

Descrição

• Projetar, desenvolver e manter pipelines batch de ETL/ELT e fluxos de dados para conjuntos de dados em larga escala na AWS • Implementar e otimizar arquiteturas lakehouse usando Apache Iceberg no S3, garantindo evolução de esquema, estratégias de particionamento e manutenção de tabelas • Construir e ajustar jobs distribuídos de processamento de dados com Apache Spark (PySpark ou Spark) para desempenho e eficiência de custo • Orquestrar workflows usando Apache Airflow, incluindo design de DAGs, agendamento e monitoramento de SLAs • Aplicar melhores práticas em qualidade de código, controle de versão (Git/GitHub) e CI/CD para projetos de engenharia de dados • Garantir qualidade, segurança e conformidade dos dados por meio de validação, monitoramento e frameworks de governança (Glue Catalog, IAM, criptografia) • Colaborar com equipes multifuncionais (data scientists, analysts, architects) para entregar soluções de dados escaláveis e confiáveis • Contribuir para o desenvolvimento e otimização de aplicações analíticas alimentadas por pipelines de dados bem estruturados e de alta qualidade • Avaliar continuamente e adotar tecnologias emergentes e ferramentas impulsionadas por IA para melhorar a produtividade e manter excelência técnica

🎯 Requisitos

• Graduação em Ciência da Computação, Engenharia ou área relacionada • Mais de 5 anos de experiência em engenharia de dados projetando e desenvolvendo soluções de dados em larga escala • Mais de 5 anos de experiência com Python para manipulação de dados, scripting e tarefas de integração • Mais de 5 anos de experiência com SQL e SGBDs (ex.: PostgreSQL, MySQL, SQL Server), modelagem de dados (Star Schema, Snowflake Schema) e tuning de queries • Mais de 3 anos de experiência com Apache Spark (preferencialmente PySpark) • Mais de 3 anos de experiência construindo pipelines batch de ETL/ELT para datasets em larga escala • Mais de 3 anos de experiência com serviços de dados da AWS (S3, Athena/Presto, Glue, Lambda, CloudWatch) em produção • Mais de 2 anos de experiência com Apache Iceberg (design de tabelas, estratégias de partição, evolução de esquema, manutenção, pipelines de ingestão para Apache Iceberg no S3) • Mais de 2 anos de experiência usando AWS EMR como plataforma de execução para workloads de big data • Mais de 2 anos de experiência orquestrando workflows de dados com Apache Airflow (design de DAGs, agendamento, backfills, SLAs) • Mais de 2 anos de experiência usando Git/GitHub (estratégias de branching, revisões de Pull Requests, CI/CD para pipelines de dados) • Experiência em projetar pipelines de ingestão eficientes para sistemas analíticos • Proficiência em logging, auditoria e monitoramento para pipelines de dados • Experiência em limpeza, validação e transformação de dados para sistemas analíticos/relatórios • Familiaridade com práticas de segurança e privacidade de dados • Sólido entendimento de arquiteturas analíticas nativas de nuvem (data lake/lakehouse, padrões ELT) • Capacidade comprovada de aproveitar assistentes baseados em IA (ex.: GitHub Copilot) como parte do fluxo de trabalho de engenharia • Inglês avançado obrigatório (trabalho com clientes dos EUA)

🏖️ Benefícios

• Salário competitivo em USD – Valorizamos suas habilidades e contribuições! • Trabalho 100% remoto – Você pode trabalhar de qualquer lugar; também há opções de conexão em coworkings pela LATAM • Folga remunerada conforme a regulamentação do seu país, com recebimento do salário integral • Feriados nacionais celebrados – Folga para comemorar eventos e tradições importantes • Licença médica – Tempo para cuidar da sua saúde e recuperação • Crédito anual reembolsável – Use em benefícios para melhorar seu equilíbrio entre vida pessoal e profissional • Atividades de integração de equipe – Pausas para café, tech talks e encontros após o expediente • Dia de folga no aniversário – Um dia extra durante a semana do seu aniversário • Suporte People Care desde o primeiro dia – Apoio com solicitações de folga e check-ins de bem-estar • Suporte de Account Management – Garante relacionamentos eficientes com clientes