AWS Data Engineer

Emploi pas sur LinkedIn

🕒 il y a 6 mois

Postuler Maintenant

Trouver des Emplois à Distance Similaires

Configurer une alerte email pour les nouveaux emplois

📊 Vérifiez votre score de CV pour ce poste

Améliorez vos chances d'obtenir un entretien en vérifiant votre score de CV avant de postuler.

Télécharger le CV

qode.world

Site WebLinkedInTous les Emplois

11 - 50 employés

💼 Conseil

📦 Logistique

🤖 Intelligence artificielle

Consulting • Logistics • Artificial Intelligence

qode. world est une entreprise qui exploite l'intelligence artificielle pour révolutionner le processus de recrutement. Leur plateforme permet aux utilisateurs de trouver des candidats en extrayant des données de milliards de points de données dans le monde entier et fournit des insights basés sur les données. Les utilisateurs peuvent se connecter directement avec les candidats via la plateforme, conduire des entretiens personnalisés dirigés par l'IA, et obtenir des évaluations complètes. Le service s'intègre également facilement à LinkedIn, enrichissant ainsi le vivier de talents et facilitant la communication directe avec les candidats listés sur cette plateforme. Qode. world offre des services de recrutement supplémentaires pour aider à l'embauche de postes de niche ou de niveau supérieur. Ils sont loués pour leur efficacité à rationaliser le processus de recrutement et offrir des résultats rapides.

Description

• Lead and support the delivery of data platform modernization projects. • Design and develop robust and scalable data pipelines leveraging AWS native services. • Optimize ETL processes, ensuring efficient data transformation. • Migrate workflows from on-premise to AWS cloud, ensuring data quality and consistency. • Design automations and integrations to resolve data inconsistencies and quality issues • Perform system testing and validation to ensure successful integration and functionality. • Implement security and compliance controls in the cloud environment. • Ensure data quality pre- and post-migration through validation checks and addressing issues regarding completeness, consistency, and accuracy of data sets. • Collaborate with data architects and lead developers to identify and document manual data movement workflows and design automation strategies.

🎯 Exigences

• 10+ years’ experience with a core data engineering skillset leveraging AWS native technologies (AWS Glue, Python, Snowflake, S3, Redshift). • Experience in the design and development of robust and scalable data pipelines leveraging AWS native services. • Proficiency in leveraging Snowflake for data transformations, optimization of ETL pipelines, and scalable data processing. • Experience with streaming and batch data pipeline/engineering architectures. • Familiarity with DataOps concepts and tooling for source control and setting up CI/CD pipelines on AWS. • Hands-on experience with Databricks and a willingness to grow capabilities. • Experience with data engineering and storage solutions (AWS Glue, EMR, Lambda, Redshift, S3). • Strong problem-solving and analytical skills. • Knowledge of Dataiku is needed • Graduate/Post-Graduate degree in Computer Science or a related field. • AWS S3 (data storage, export, recall) • Athena (querying data lakes) • Data pipelines (batch & near-real-time) • Integration with external systems (FHIR) • Secure data handling (KMS, Macie) • Cloud-native analytics • Multi-account, multi-region data architecture • BI integrations: Power BI, Tableau, QuickSight