Data Engineer, Databricks – Senior

Job not on LinkedIn

🔥 3 minutes ago

Apply Now

Find Similar Remote Jobs

Receive Emails For Remote Jobs

📊 Check your resume score for this job

Improve your chances of getting an interview by checking your resume score before you apply.

Upload Resume

Compass

WebsiteLinkedInAll Job Openings

10,000+ employees

🏠 Real Estate

📱 Media

Real Estate • Media

Compass is a real-estate-focused content and services site that provides detailed market analysis, buying/selling/renting guides, mortgage and financing information, and home improvement and renovation advice. The site offers resources for homebuyers, sellers, renters, agents, and real estate investors — including articles on appraisals, affordable housing, investment strategies, staging and property maintenance. Compass aims to help users make informed decisions across the housing lifecycle through timely market updates and practical how-to content.

📋 Description

• Colaborar com as equipes de engenharia de dados para entender os requisitos e fornecer soluções eficientes; • Atuar no desenvolvimento e sustentação das tecnologias Azure, Databricks (PysPark), Python, Data Lake e SQL; • Utilizar Python ElementTree para manipulação eficiente de dados XML e integração de dados heterogêneos; • Desenvolver scripts em Python utilizando Pandas para manipulação e análise de dados estruturados; • Atuar com a disponibilidade, estabilidade e evolução contínua dos sistemas do cliente assegurando alta performance; • Atuar com a parte de segurança e conformidade dos requisitos de negócio, por meio de uma gestão proativa, automação de processos e melhoria contínua dos serviços de sustentação; • Trabalhar com a qualidade e integridade dos dados, implementando práticas de teste e monitoramento; • Manter documentação técnica abrangente para os processos e soluções implementadas; • Apoio com ações corretivas, suportando as entregas em produção, acompanhando CHGs;

🎯 Requirements

• Experiência com SQL (Regex), Databricks, PySpark e Python: conhecimento fundamental nessas tecnologias; • Conhecimento em manipulação de texto em programação e análise de dados, principalmente Regex; • Experiência em modelagem de dados SQL e básico de computação distribuída; • Disponibilidade para atuar no regime de sobreaviso após o horário comercial e finais de semana; • Experiência com Data Lake;