Engenheiro(a) de Dados Sênior Databricks

🔥 0 minutos atrás

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Extractta

SiteLinkedInTodas as Vagas

201 - 500 funcionários

Fundada em 2005

💼 Consultoria

📣 Marketing

☁️ SaaS

Consulting • Marketing • SaaS

QUEM SOMOS Empresa com proficiência em tecnologia da informação e orientada aos princípios: Reinvenção continua para suportar os processos de reinvenção dos nossos clientes. Profunda dedicação ao entendimento das necessidades dos nossos clientes. Orientação contínua dos clientes na utilização dos melhores produtos e soluções.

Descrição

• Desenvolver, manter e otimizar pipelines de dados (ETL/ELT) utilizando Databricks • Construir soluções de processamento de dados utilizando Apache Spark e PySpark • Trabalhar com grandes volumes de dados, garantindo performance, escalabilidade e confiabilidade • Desenvolver e manter processos de ingestão, transformação e disponibilização de dados • Atuar na construção e evolução de arquiteturas Data Lake e Lakehouse • Desenvolver e otimizar consultas utilizando SQL • Implementar boas práticas de qualidade, governança e segurança de dados • Realizar análise e otimização de performance de jobs, pipelines e consultas • Apoiar definições técnicas e arquiteturais relacionadas à plataforma de dados • Implementar processos de monitoramento e tratamento de falhas nos pipelines • Trabalhar com versionamento de código e processos de CI/CD • Participar de cerimônias ágeis e atuar de forma colaborativa com Engenharia de Dados, Analytics, Arquitetura e áreas de negócio • Apoiar tecnicamente profissionais do time, contribuindo com boas práticas e evolução das soluções

🎯 Requisitos

• Experiência sólida como Engenheiro(a) de Dados, preferencialmente em nível Sênior • Experiência comprovada com Databricks • Domínio de Apache Spark e PySpark • Experiência avançada com SQL • Conhecimento em Delta Lake • Experiência na construção e manutenção de pipelines ETL/ELT • Conhecimento de arquiteturas Data Lake, Lakehouse e/ou Data Warehouse • Experiência com processamento de grandes volumes de dados • Conhecimento em modelagem e transformação de dados • Experiência com Git e práticas de CI/CD • Conhecimento de boas práticas de segurança, governança e qualidade de dados • Capacidade de análise de performance e troubleshooting de pipelines • Perfil analítico, colaborativo e com autonomia para conduzir demandas técnicas • Desejável: experiência com Databricks Unity Catalog • Desejável: conhecimento de Databricks Workflows/Jobs • Desejável: experiência com Medallion Architecture (Bronze, Silver e Gold) • Desejável: conhecimento em Python para Engenharia de Dados • Desejável: experiência com serviços de dados em AWS, Azure ou GCP • Desejável: conhecimento em Apache Airflow ou Azure Data Factory • Desejável: experiência com Terraform • Desejável: certificações relacionadas ao Databricks ou plataformas Cloud • Desejável: experiência em ambientes de alta volumetria e soluções críticas de dados

🏖️ Benefícios

• Vale Alimentação e/ou Vale Refeição • Convênio Sesi e Sesc, oferecendo acesso a serviços de saúde, bem-estar e lazer • Parceria com Instituições de Ensino, com descontos exclusivos em cursos e programas educacionais • Possibilidade de crescimento na empresa e de participação em projetos estratégicos • Oportunidade de trabalhar em uma empresa do mercado em plena expansão