Engenheiro de Dados Sênior Databricks

Vaga não está no LinkedIn

🔥 9 minutos atrás

🇧🇷 Brasil – Remoto

⏰ Tempo Integral

🟠 Sênior

🚰 Engenheiro de Dados

👻 Score fantasma 10%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

INDT - Instituto de Desenvolvimento Tecnológico

SiteLinkedInTodas as Vagas

201 - 500 funcionários

Fundada em 2001

💼 Consultoria

🏭 Manufatura

🏥 Saúde

Consulting • Manufacturing • Healthcare

O INDT - Instituto de Desenvolvimento Tecnológico é um centro brasileiro de pesquisa, desenvolvimento e inovação (PD&I) fundado em Manaus que fornece soluções e serviços tecnológicos multidisciplinares para a indústria. Oferece desenvolvimento de materiais avançados, integração de biotecnologia para sustentabilidade e rastreabilidade da cadeia de suprimentos, engenharia de comunicação e rede incluindo WiFi-Mesh e 5G privado, manufatura avançada e automação, cibersegurança (SOC) para ambientes industriais, testes laboratoriais e prototipagem, além de treinamento profissional em tecnologias da Indústria 4. 0. O instituto faz parcerias com a indústria e programas públicos para entregar P&D, testes, certificação e treinamento aplicado.

Descrição

• Atuar na implementação e evolução da plataforma de dados em Databricks • Desenvolver e evoluir pipelines de dados utilizando Spark/PySpark • Construir soluções de ingestão, transformação e processamento de grandes volumes de dados • Trabalhar com Delta Lake e recursos do ecossistema Databricks • Atuar com arquitetura e modelagem de soluções de dados escaláveis • Implementar boas práticas de engenharia de dados, qualidade, governança e observabilidade • Identificar e resolver problemas de performance em pipelines e processos de dados • Realizar otimizações de processamento, armazenamento e consultas • Trabalhar com Unity Catalog e recursos relacionados à governança e segurança dos dados • Participar da definição e implementação de estratégias de orquestração e integração de pipelines • Atuar em conjunto com times de tecnologia e negócio na definição das melhores soluções técnicas • Garantir qualidade, confiabilidade, escalabilidade e manutenção das soluções desenvolvidas • Contribuir para a evolução das boas práticas e padrões de engenharia de dados do projeto

🎯 Requisitos

• Experiência sólida e prática com Databricks • Experiência avançada com Apache Spark e PySpark • Experiência com Delta Lake • Conhecimento e experiência com Unity Catalog • Experiência na implementação e evolução de pipelines de dados • Conhecimento de arquitetura e boas práticas de Engenharia de Dados • Experiência com otimização e troubleshooting de performance em Spark/Databricks • Experiência com processamento de grandes volumes de dados • Capacidade de atuar com autonomia na análise de problemas e definição de soluções técnicas • Experiência em ambientes corporativos/enterprise • Diferencial: Certificação Databricks • Diferencial: Experiência com AWS • Diferencial: Experiência com Terraform e práticas de Infrastructure as Code (IaC) • Diferencial: Conhecimento ou experiência com Kafka e outras tecnologias de streaming • Diferencial: Experiência com Data Quality • Diferencial: Conhecimento de ferramentas e práticas de observabilidade • Diferencial: Experiência anterior em projetos de grande escala • Diferencial: Vivência com ambientes de alta volumetria e requisitos de alta disponibilidade

🏖️ Benefícios

• Ambiente colaborativo • Oportunidades de aprendizado e crescimento • Ótimo ambiente de trabalho • Colegas e líderes inspiradores • Liberdade para propor e desenvolver projetos inovadores • Autonomia e protagonismo • Oportunidade de desenvolver talentos • Experiência de sentir-se valorizado