Senior Data Engineer – Databricks Expert

Emploi pas sur LinkedIn

🕒 il y a 1 mois

🇵🇱 Pologne – Télétravail

💵 zł20 000 - zł30 000 / mois

⏰ Temps Plein

🟠 Senior

🚰 Ingénieur Data

👻 Score fantôme 17%

Ce que ça veut dire : la probabilité que personne ne recrute vraiment pour cette offre.Comment le lire : 60 % ou plus, on pense que c'est une offre fantôme. Un score plus bas est moins inquiétant.Comment on la calcule : ancienneté, republications, postes ouverts vs taille de l'équipe, rapidité de clôture, et si le salaire est indiqué.À noter : une estimation à partir de données publiques, pas un jugement sur l'entreprise. De vraies offres peuvent avoir un score élevé, alors prenez-le comme un indice, pas comme un fait.

Postuler Maintenant

Trouver des Emplois à Distance Similaires

stermedia.ai

Site WebLinkedInTous les Emplois

11 - 50 employés

Fondée en 2009

🤖 Intelligence artificielle

🤝 B2B

🏭 Fabrication

Artificial Intelligence • B2B • Manufacturing

Stermedia. ai est une entreprise de B2B spécialisée en intelligence artificielle et en ingénierie logicielle, qui conçoit des solutions sur mesure en intelligence artificielle, automatisation robotique, logiciels de fabrication basés sur le cloud et conception de produits. Depuis 2009, elle offre des services de transformation numérique incluant l'apprentissage profond et la science des données, l'automatisation robotique et des processus, le développement d'applications web et mobiles personnalisées, la conception UX/produit, et l'architecture cloud (AWS/IBM). L'entreprise démontre une expérience sectorielle dans les domaines de la fabrication et de l'automobile (logiciels de fabrication AndonCloud et cas d'études industrie 4. 0), la santé (imagerie médicale IA), les RH/recrutement (correspondance CV/emploi), les projets médiatiques et du secteur public, et met en avant des succès de compétition ainsi que plusieurs études de cas clients démontrant son expertise technique.

Description

• Design, develop, and maintain data pipelines in Databricks using Python, PySpark, and SQL • Build and maintain Delta Lake tables and transformation layers following bronze, silver, and gold architecture • Integrate data from multiple source systems into consistent, analytics-ready datasets • Implement incremental processing, change data capture, and schema evolution where required • Develop and orchestrate production workflows, including dependencies, scheduling, retries, and monitoring • Optimize Spark workloads, SQL queries, and compute usage to improve performance and manage costs • Implement automated data quality checks, validation, and pipeline tests • Support data access management, governance, and lineage using Unity Catalog • Maintain reusable code, technical documentation, and Git-based development workflows • Collaborate with business stakeholders, data engineers, analysts, and machine learning specialists to translate requirements into reliable data solutions • Contribute to the full delivery lifecycle, from client discussions and business requirements analysis through solution design, implementation, and production deployment

🎯 Exigences

• Strong commercial experience with Databricks, including developing and operating production data pipelines • Advanced knowledge of Python, PySpark, and SQL • Hands-on experience with Apache Spark, distributed data processing, and performance troubleshooting • Practical experience with Delta Lake, including incremental loads, merge operations, and schema management • Strong understanding of lakehouse architecture, ETL/ELT patterns, and data modeling • Experience orchestrating and monitoring workflows in Databricks • Practical knowledge of Unity Catalog, including permissions, data organization, and lineage • Experience optimizing pipeline performance and compute resource usage • Familiarity with cloud storage and services in at least one major cloud environment: Azure, AWS, or GCP • Experience with Git, code reviews, automated testing, and CI/CD workflows • Strong analytical and communication skills, with the ability to work directly with international stakeholders • Good command of English

🏖️ Avantages

• Opportunities to work with modern data engineering and machine learning technologies • An annual self-development budget • The opportunity to contribute to a variety of interesting projects • Internal workshops and knowledge-sharing sessions • Support for personal branding through articles, conference talks, and leading internal workshops • Flexible working hours • The possibility of remote work • A chillout room, free beverages, and team and company events • A friendly atmosphere • MultiSport • LuxMed

📊 Vérifiez votre score de CV pour ce poste

Améliorez vos chances d'obtenir un entretien en vérifiant votre score de CV avant de postuler.

Télécharger le CV