Engenheiro de Dados sênior (Hadoop & AWS)

🕒 Ontem

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Stefanini Brasil

SiteLinkedInTodas as Vagas

10.000+ funcionários

Fundada em 1987

💼 Consultoria

🏥 Saúde

📦 Logística

Consulting • Healthcare • Logistics

A Stefanini Brasil é uma provedora líder de soluções de transformação digital, oferecendo um portfólio de serviços que inclui inteligência artificial, cibersegurança, cloud enablement e consultoria. Com mais de 35 anos de experiência, a empresa se dedica a integrar tecnologias inovadoras para ajudar organizações de diversos setores a aprimorar suas operações e a experiência de seus clientes. Sua expertise abrange segmentos como saúde, varejo e bens industriais, possibilitando que as empresas otimizem processos e gerem valor por meio da tecnologia.

Descrição

• Levantar, documentar e priorizar *jobs*, pipelines e queries HQL no Cloudera, mapeando dependências, volumes, SLAs e rotinas em Shell Script. • Redesenhar pipelines para AWS (Athena, Glue, EMR, Step Functions, Lambda), definindo a modelagem no Amazon S3 (zonas *raw*, *trusted*, *refined*) e Amazon Redshift. • Implementar pipelines de ETL no AWS Glue com versionamento de código, aplicando automação via Infraestrutura como Código (Terraform ou CloudFormation). • Garantir boas práticas de particionamento, catalogação (Glue Data Catalog), formatos otimizados (Parquet/Iceberg) e validação rigorosa da paridade de dados (reconciliação) pré-produção. • Conduzir a janela de virada (*cutover*), gerenciar planos de *rollback*, prestar suporte pós-migração (*hypercare*) e documentar *runbooks* para repasse de conhecimento.

🎯 Requisitos

• Histórico prático comprovado em migração de consultas/rotinas HQL para AWS (Athena, Glue ou EMR). • Vivência real e sólida em ambientes de produção com Cloudera, Hadoop e Hive. • Domínio avançado em Shell Script para automação e orquestração de processos. • Prática em desenvolvimento com Terraform ou CloudFormation e esteiras de CI/CD. • Conhecimento em gestão de acessos via IAM (*least privilege*), AWS Lake Formation, criptografia de dados e conformidade com LGPD. • Senso de dono para assumir a operação ponta a ponta, autonomia para tomada de decisões técnicas e atuação em times ágeis (Scrum/Kanban).

🏖️ Benefícios

• Vale-alimentação ou vale-refeição; • Desconto em cursos, universidades e instituições de idiomas; • Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado; • Mentoring; • Clube de vantagens para consultas e exames; • Assistência médica; • Assistência odontológica; • Clube de vantagens e descontos nos melhores estabelecimentos; • Clube de viagens; • Convênio para pets.