Engenheiro de Dados Pleno

🔥 14 minutos atrás

🇧🇷 Brasil – Remoto

⏰ Tempo Integral

🟡 Pleno

🟠 Sênior

🚰 Engenheiro de Dados

👻 Score fantasma 10%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Stefanini Brasil

SiteLinkedInTodas as Vagas

10.000+ funcionários

💼 Consultoria

🏢 Corporativo

🤖 Inteligência Artificial

Consulting • Enterprise • Artificial Intelligence

A Stefanini Brasil é o braço brasileiro do Grupo Stefanini, uma empresa global de consultoria e serviços de tecnologia com uma abordagem centrada em IA. Oferece serviços de tecnologia e consultoria para modernizar e operar ambientes de TI, incluindo plataformas e aplicações de IA, desenvolvimento de aplicações personalizadas, infraestrutura e nuvem híbrida, migração e gestão em nuvem, serviços de local de trabalho digital, plataformas empresariais (incluindo a plataforma bancária completa Topaz), dados e análise, cibersegurança e soluções específicas para indústrias como manufatura, serviços financeiros, varejo, telecomunicações e mais. A Stefanini enfatiza a transformação habilitada por IA, operações ponta a ponta e serviços gerenciados, e faz parcerias com grandes clientes corporativos de diversos setores para oferecer transformação digital, automação e soluções para indústrias.

Descrição

• Construir e manter pipelines de ingestão e transformação para dados de APIs, bancos relacionais, arquivos e data lakes • Desenvolver soluções em Python, SQL e PySpark, com código organizado, reutilizável e testável • Modelar dados em Delta Lake, aplicando cargas incrementais, operações MERGE e boas práticas de manutenção • Implementar arquiteturas Medallion (Bronze, Silver e Gold) e regras de qualidade de dados • Orquestrar jobs e pipelines, configurar dependências, parâmetros, retentativas e alertas • Monitorar execuções, investigar falhas e diagnosticar problemas de qualidade e performance • Otimizar consultas, processamento, uso de clusters e custos, medindo os resultados das melhorias • Aplicar práticas de governança e segurança, incluindo controle de acesso e proteção de dados sensíveis • Colaborar em revisões de código, testes, versionamento e implantação entre ambientes

🎯 Requisitos

• Experiência prática com Python, SQL avançado e PySpark • Experiência na construção e operação de pipelines de dados em Databricks • Conhecimento de Delta Lake, incluindo transações, evolução de schema, cargas incrementais e operações de atualização • Experiência com processamento batch; conhecimento de streaming é desejável • Conhecimento de arquitetura Medallion e de formatos como CSV, JSON e Parquet • Experiência com orquestração de jobs, monitoramento e tratamento de falhas • Familiaridade com Git, revisão de código e testes • Capacidade de investigar problemas, explicar decisões técnicas e atuar com autonomia • Experiência com Auto Loader, Structured Streaming e pipelines declarativos • Conhecimento de Unity Catalog, linhagem, auditoria e permissões • Experiência com AWS, Azure ou Google Cloud • Prática com CI/CD, infraestrutura como código e Databricks Asset Bundles ou ferramentas equivalentes • Certificação Databricks Certified Data Engineer Associate

🏖️ Benefícios

• Vale-alimentação ou vale-refeição • Desconto em cursos, universidades e instituições de idiomas • Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado • Mentoring • Clube de vantagens para consultas e exames • Assistência médica • Assistência odontológica • Clube de vantagens e descontos nos melhores estabelecimentos • Clube de viagens • Convênio para pets