Ingeniero PySpark

Job not on LinkedIn

🔥 0 minutes ago

🇲🇽 Mexico – Remote

💵 $2k - $3k / month

⏳ Contract/Temporary

🟢 Junior

🟡 Mid-level

👷🏻‍♀️ Engineer

🚫👨‍🎓 No degree required

👻 Ghost score 20%

infoinfo

🗣️🇪🇸 Spanish Required

Apply Now
Find Similar Remote Jobs

📊 Check your resume score for this job

Improve your chances of getting an interview by checking your resume score before you apply.

Logo of iCodde

iCodde

1 - 10 employees

💼 Consulting

📦 Logistics

📣 Marketing

Consulting • Logistics • Marketing

iCodde is a company that specializes in providing high-quality IT talent resources in a minimal timeframe. It offers recruitment process outsourcing (RPO) services and manages contractor hiring and payrolls. iCodde leverages the latest disruptive technology to support companies in attracting specialized IT talent, offering a rapid and efficient recruitment process. With a focus on agile methodology and real-time tracking, iCodde aims to deliver quick results without compromising quality. The company also provides services to help businesses automate processes, perform executive reporting, and justify roles and salaries based on market references.

📋 Description

• Diseñar, desarrollar y mantener procesos ETL/ELT utilizando PySpark y Python • Procesar y transformar grandes volúmenes de datos mediante arquitecturas distribuidas • Desarrollar pipelines de datos robustos, escalables y eficientes • Optimizar jobs de Spark, consultas y procesos de transformación para mejorar tiempos de ejecución y consumo de recursos • Trabajar con fuentes de datos estructuradas y no estructuradas • Integrar información proveniente de bases de datos, APIs, archivos y diferentes fuentes de información • Implementar procesos de validación, limpieza y transformación de datos • Participar en el diseño de arquitecturas de datos y soluciones Big Data • Monitorear y solucionar errores en pipelines y procesos de procesamiento de datos • Implementar buenas prácticas de desarrollo, control de versiones y documentación • Colaborar con Data Engineers, Data Scientists, DevOps, arquitectos y equipos de negocio • Participar en procesos de automatización y mejora continua de las plataformas de datos

🎯 Requirements

• +2 años de experiencia en Data Engineering o desarrollo de soluciones de procesamiento de datos • Experiencia sólida con PySpark y Python • Conocimiento de Apache Spark y procesamiento distribuido • Experiencia desarrollando procesos ETL/ELT • Manejo avanzado de SQL • Experiencia con bases de datos relacionales y/o NoSQL • Conocimiento de formatos Parquet, JSON, CSV y Avro • Experiencia con herramientas de control de versiones, principalmente Git • Conocimiento de ambientes Linux/Unix • Experiencia con alguna plataforma Cloud como AWS, Azure o GCP • Deseable experiencia con Databricks, AWS Glue, EMR, Azure Databricks, Synapse o similares • Deseable conocimiento de herramientas de orquestación como Airflow • Deseable experiencia con Docker y CI/CD

🏖️ Benefits

• Compensación económica por contratación efectiva mediante el programa de referidos

Apply Now

Similar Jobs

🕒 July 26

AVAHI

1 - 10

💼 Consulting

🏥 Healthcare

🍽️ Food & Beverage

Amazon Connect Engineer designing and implementing AI-powered contact center solutions for SMB customers. Leading workshops and technical integrations while collaborating with cross-functional teams.

AWS

Cloud

DynamoDB

🕒 June 30

Interview Pen

1 - 10

📚 Education

Interview Engineer facilitating technical interviews with software developers around the world. Collaborating with Karat to improve inclusive hiring processes and candidate evaluations.