Engenheiro de Dados AWS/Databricks

🔥 0 minutos atrás

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Stefanini Brasil

SiteLinkedInTodas as Vagas

10.000+ funcionários

Fundada em 1987

🤖 Inteligência Artificial

🔒 Cibersegurança

Artificial Intelligence • Cybersecurity • Cloud

A Stefanini Brasil é uma provedora líder de soluções de transformação digital, oferecendo um portfólio de serviços que inclui inteligência artificial, cibersegurança, cloud enablement e consultoria. Com mais de 35 anos de experiência, a empresa se dedica a integrar tecnologias inovadoras para ajudar organizações de diversos setores a aprimorar suas operações e a experiência de seus clientes. Sua expertise abrange segmentos como saúde, varejo e bens industriais, possibilitando que as empresas otimizem processos e gerem valor por meio da tecnologia.

Descrição

• Construir e manter pipelines de ingestão, transformação e curadoria de dados; • Desenvolver pipelines ELT/ETL utilizando PySpark e SQL nas camadas Medallion; • Implementar regras de qualidade de dados, monitoramento e padrões de remediação; • Realizar profiling de dados e inventário de fontes para avaliação e governança; • Catalogar datasets e aplicar políticas de tratamento compatíveis com a LGPD utilizando Unity Catalog; • Atuar na integração de APIs, diferentes fontes de dados e processos de orquestração.

🎯 Requisitos

• Experiência sólida como Engenheiro(a) de Dados; • Databricks (Delta Lake); • PySpark e SQL; • Construção de pipelines ELT/ETL; • Arquitetura Medallion; • Ingestão Batch e Streaming (Auto Loader, Kafka e Structured Streaming); • Modelagem Dimensional e Data Vault; • dbt e/ou Delta Live Tables (DLT); • Frameworks de qualidade de dados (Great Expectations, DLT Expectations); • Observabilidade e monitoramento de pipelines; • Orquestração com Databricks Workflows e/ou Apache Airflow; • Integração com APIs e diferentes fontes de dados; • Inglês Fluente é fundamental para conversação.

🏖️ Benefícios

• Vale-alimentação ou vale-refeição; • Desconto em cursos, universidades e instituições de idiomas; • Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado; • Mentoring; • Clube de vantagens para consultas e exames; • Assistência médica; • Assistência odontológica; • Clube de vantagens e descontos nos melhores estabelecimentos; • Clube de viagens; • Convênio para pets.