Especialista em Engenharia de Dados

Job not on LinkedIn

September 25

Apply Now

Receive Emails with Similar Jobs

Experian

WebsiteLinkedInAll Job Openings

Artificial Intelligence • B2B • SaaS

Experian is a global leader in digital experience, technology, and transformation. They partner with recognized brands to enhance customer understanding, innovate product strategies, and implement agile technology solutions. With a focus on delivering superior customer experiences through AI, cloud architecture, and project management, Experian helps businesses streamline their operations and achieve their objectives effectively.

10001 employees

Founded 1996

🤖 Artificial Intelligence

🤝 B2B

☁️ SaaS

📋 Description

• Desenvolver e manter pipelines de dados escaláveis utilizando Scala e Apache Spark, com foco em performance e reutilização • Estruturar e evoluir a arquitetura medalhão (bronze, silver, gold), garantindo governança, rastreabilidade e qualidade dos dados • Implementar soluções de ingestão, transformação e disponibilização de dados em ambientes cloud e lakehouse • Definir e aplicar boas práticas de engenharia de dados, incluindo versionamento, testes automatizados e CI/CD • Apoiar decisões técnicas e arquiteturais junto aos times de engenharia e produto • Atuar em squads multidisciplinares, colaborando com engenheiros, analistas e cientistas de dados • Participar de rituais ágeis e contribuir com a evolução contínua dos processos e ferramentas • Monitorar e otimizar pipelines em produção, garantindo confiabilidade e eficiência • Trabalhar com ferramentas como Airflow, Delta Lake, Iceberg, e ambiente AWS • Investigar e propor melhorias em arquitetura, performance e segurança dos dados

🎯 Requirements

• Experiência sólida com Python, Scala e Apache Spark em ambientes distribuídos • Domínio de arquitetura medalhão (bronze, silver, gold) e conceitos de data lake / lakehouse • Conhecimento avançado em modelagem de dados, ETL/ELT e pipelines de dados • Vivência com ferramentas de orquestração como Airflow ou similares • Experiência com ambientes cloud (Azure, AWS ou GCP) • Práticas de engenharia: versionamento, testes automatizados e automação (CI/CD) • Idioma: Inglês - Técnico

🏖️ Benefits

• Employees can work remotely • Ambiente inclusivo e equilíbrio entre carreira e compromissos pessoais, prezando pelo bem-estar • Investimento em novas tecnologias e desenvolvimento profissional • Reconhecimentos e certificações (Great Place To Work™, Top Employers, Glassdoor 4.6)