Senior Data Engineer, Databricks

Job not on LinkedIn

🔥 4 minutes ago

Apply Now

Find Similar Remote Jobs

Set Up Email Alert For New Jobs

📊 Check your resume score for this job

Improve your chances of getting an interview by checking your resume score before you apply.

Upload Resume

Compass

WebsiteLinkedInAll Job Openings

10,000+ employees

🏠 Real Estate

📱 Media

Real Estate • Media

Compass is a real-estate-focused content and services site that provides detailed market analysis, buying/selling/renting guides, mortgage and financing information, and home improvement and renovation advice. The site offers resources for homebuyers, sellers, renters, agents, and real estate investors — including articles on appraisals, affordable housing, investment strategies, staging and property maintenance. Compass aims to help users make informed decisions across the housing lifecycle through timely market updates and practical how-to content.

📋 Description

• Desenvolver e manter pipelines de ingestão, transformação e disponibilização de dados • Modelar e estruturar dados em ambientes Data Lake e Data Lakehouse • Desenvolver processos de ETL/ELT utilizando Databricks, Python e Azure Data Factory • Integrar dados provenientes de APIs, bancos de dados e arquivos estruturados e não estruturados • Atuar em projetos envolvendo SAP Datasphere e Azure Data Lake Storage (ADLS) • Desenvolver soluções para processamento de dados com foco em performance, qualidade e governança • Participar de iniciativas de IA Generativa, como estruturação de bases para RAG e processamento de documentos • Colaborar com equipes multidisciplinares na evolução de soluções de dados

🎯 Requirements

• Ensino superior completo em Tecnologia da Informação ou pós-graduação em TI, mínimo de 360 horas reconhecidas pelo MEC • Experiência avançada com Databricks • Sólidos conhecimentos em modelagem de dados • Experiência com Python e SQL • Conhecimento em Azure Data Factory e Azure Data Lake Storage (ADLS) • Experiência com SAP Datasphere • Vivência com bancos de dados relacionais, como SQL Server e Oracle • Experiência na construção e manutenção de pipelines de dados escaláveis e confiáveis • Diferencial: conhecimento em Apache Spark, Airflow, Kafka ou dbt • Diferencial: experiência com arquiteturas Data Lake e Data Lakehouse • Diferencial: vivência com integrações via APIs • Diferencial: experiência em projetos de IA Generativa, RAG e processamento de documentos • Diferencial: conhecimento em outras plataformas cloud e ecossistemas de dados modernos