Ingénieur Data senior

Emploi pas sur LinkedIn

🔥 il y a 3 minutes

🌏 N'importe où dans le monde

💵 $190 000 - $240 000 / an

⏰ Temps Plein

🟠 Senior

🚰 Ingénieur Data

👻 Score fantôme 0%

infoinfo

🗣️🇺🇸🇬🇧 Anglais requis

Airflow

Amazon Redshift

Apache

AWS

PostGIS

Postgres

Python

SQL

Subversion

Postuler Maintenant
Trouver des Emplois à Distance Similaires

📊 Vérifiez votre score de CV pour ce poste

Améliorez vos chances d'obtenir un entretien en vérifiant votre score de CV avant de postuler.

Logo of Ready.net

Ready.net

1 - 10 employés

💼 Conseil

📦 Logistique

🏛️ Gouvernement

Consulting • Logistics • Government

Ready. net est une entreprise qui fournit des solutions logicielles innovantes conçues pour améliorer l'efficacité administrative et le développement des infrastructures à haut débit. L'entreprise propose une plateforme complète pour gérer les subventions dans les domaines du haut débit, de l'énergie et de l'eau, en utilisant l'intelligence artificielle géospatiale pour assurer une conformité, un reporting et une collaboration efficaces. Ready. net se spécialise dans l'automatisation et l'optimisation des processus pour les agences gouvernementales, les fournisseurs de services publics et les opérateurs de haut débit afin d'améliorer l'allocation des ressources et de rationaliser les opérations. Leurs services visent à accroître l'efficacité, la transparence et l'engagement entre les parties prenantes. Ready. net s'engage à réduire la fracture numérique en permettant aux bureaux d'État du haut débit et à d'autres organisations de gérer efficacement les subventions, d'assurer l'équité numérique et de connecter les communautés mal desservies.

Description

• Collaborer avec les équipes produit et engineering afin de comprendre les besoins et de les traduire en architecture technique • Évaluer et recommander les outils, frameworks et choix d’infrastructure data • Contribuer aux discussions sur la roadmap et aux décisions « build vs buy » • Concevoir, déployer et maintenir une infrastructure data AWS évolutive • Être responsable de l’architecture du data lake et du data warehouse, notamment du partitionnement, de l’optimisation du stockage et de la gestion du cycle de vie des données • Développer et maintenir des DAG Apache Airflow de niveau production pour les workflows d’ingestion, de transformation et d’export • Garantir l’observabilité grâce au monitoring, aux alertes et à la résolution des incidents • Développer et maintenir des pipelines dbt intégrant des contrôles de qualité des données et une modélisation structurée • Concevoir et maintenir les schémas de bases de données pour des données de programmes multi-États et multi-tenant • Rédiger et optimiser des requêtes SQL sur PostgreSQL, Redshift et Athena • Développer des modèles de données, utilitaires et packages Python partagés et réutilisables • Concevoir des infrastructures pour des données time series et event-based à grande échelle • Mettre en œuvre des patterns d’ingestion, de stockage et de récupération pour des jeux de données temporels à haute fréquence • Travailler avec des bases de données vectorielles pour des fonctionnalités basées sur l’IA et la recherche sémantique • Intégrer des workflows LLM aux pipelines ELT avec AWS Bedrock, LangChain et les frameworks associés • Développer des pipelines de comparaison, de validation et d’enrichissement des données assistés par l’IA et prêts pour la production • Travailler avec MLflow et déployer des pipelines ML de niveau production • Suivre les évolutions des outils IA/ML et apporter à l’équipe les innovations pertinentes • Concevoir des systèmes automatisés de QA des données pour contrôler leur qualité, leur complétude et leur cohérence • Mettre en œuvre des routines de nettoyage et de rapprochement pour l’ingestion multi-source • Superviser les pipelines de manière proactive et résoudre les problèmes avant tout impact sur les systèmes en aval • Accompagner les ingénieurs Data juniors et intermédiaires au moyen de code reviews, de pair programming et de conseils en architecture • Établir des standards en matière de qualité du code, de tests et de documentation • Encourager la prise de responsabilité, la curiosité et l’amélioration continue au sein de l’équipe Data

🎯 Exigences

• Au moins 5 ans d’expérience en data engineering, avec la responsabilité de systèmes en production et de leur support opérationnel de bout en bout • Capacité à évaluer les compromis techniques et à prendre des décisions d’architecture pragmatiques en équilibrant coûts et performances • Maîtrise avancée de SQL, notamment PostgreSQL et Athena/Presto • Excellente maîtrise de Python et du développement de code de qualité production • Expérience pratique approfondie des services data AWS : S3, Athena, RDS, ECS, Lambda, IAM et CloudWatch • Expérience en production avec Apache Airflow ou des outils d’orchestration similaires • Expérience des systèmes de données time series, event-based ou streaming à grande échelle • Expérience de la gestion de versions avec GitHub, Subversion, GitLab ou Mercurial • Connaissance des bases de données vectorielles et des patterns d’intégration de LLM tels que LangChain et AWS Bedrock • Expérience dans la création de frameworks de qualité des données ou de systèmes automatisés de validation • Capacité démontrée à accompagner des ingénieurs et à contribuer à la culture de l’équipe • Excellentes aptitudes à la communication pour expliquer des décisions complexes liées à l’infrastructure à des interlocuteurs non techniques • Aisance dans les environnements ambigus et capacité à prendre des décisions fondées sur les principes fondamentaux • Aisance à travailler avec plusieurs fuseaux horaires • Une expérience de la gestion des données pour des plateformes SaaS serait un plus • Une expérience des pipelines de données spatio-temporelles à grande échelle, notamment avec PostGIS, l’indexation spatiale et le tiling, serait un plus

🏖️ Avantages

• Une politique d’avantages sociaux compétitive et en constante évolution pour les salariés et leurs ayants droit • Des possibilités d’apprentissage et d’évolution — tout l’univers des start-up • Travaillez depuis l’endroit de votre choix, à condition de disposer d’une excellente connexion Internet • Séminaires d’équipe facultatifs et encouragés, organisés 2 à 3 fois par an • Possibilité de contribuer à l’évolution de la politique d’avantages sociaux • Potentiel de valorisation significatif lié aux titres de participation

Postuler Maintenant

Emplois Similaires

🕒 il y a 1 mois

AAIS (American Association of Insurance Services)

51 - 200

💼 Conseil

⚖️ Juridique

📦 Logistique

Ingénieur MDM chez AAIS supervisant la gestion et la gouvernance des master data. Développement de plateformes et de pipelines en collaboration transversale pour garantir l'intégrité et la qualité des données.

🌏 N'importe où dans le monde

💵 $130 000 / an

⏰ Temps Plein

🟡 Intermédiaire

🟠 Senior

🚰 Ingénieur Data

🗣️🇺🇸🇬🇧 Anglais requis

🕒 il y a 2 mois

Castillians

51 - 200

Ingénieur Data optimisant le patrimoine data et surveillant les processus ETL pour le secteur du marketing digital. Collaboration à la migration d'architecture et participation à des projets d'analytique de données pour améliorer les performances.

🌏 N'importe où dans le monde

⏰ Temps Plein

🟡 Intermédiaire

🟠 Senior

🚰 Ingénieur Data

🗣️🇺🇸🇬🇧 Anglais requis

🕒 il y a 3 mois

Luxor Technology

51 - 200

📦 Logistique

💼 Conseil

₿ Crypto

Ingénieur Data développant des pipelines de données évolutifs pour des logiciels de minage de Bitcoin, en support de l'infrastructure de calcul et en contribuant à la stratégie de l'entreprise.

🌏 N'importe où dans le monde

⏰ Temps Plein

🟡 Intermédiaire

🟠 Senior

🚰 Ingénieur Data

🗣️🇺🇸🇬🇧 Anglais requis

🕒 il y a 4 mois

Speechify

51 - 200

🏥 Santé

🏨 Hôtellerie

📚 Éducation

Ingénieur logiciel chargé de la collecte de données et du pipeline d'ingestion pour l'entraînement de modèles d'IA chez Speechify. Collabore avec les scientifiques pour améliorer la qualité des données et l'efficience des coûts.

🌏 N'importe où dans le monde

💵 $140 000 - $200 000 / an

⏰ Temps Plein

🟡 Intermédiaire

🟠 Senior

🚰 Ingénieur Data

🗣️🇺🇸🇬🇧 Anglais requis

🕒 il y a 4 mois

Canonical

501 - 1000

🤖 Intelligence artificielle

Ingénieur spécialisé Python et Kubernetes chez Canonical, développant des solutions open source pour l'analyse de données et l'IA/ML. Collaboration sur le MLOps et les déploiements cloud au sein d'une équipe distribuée à l'échelle mondiale.

🌏 N'importe où dans le monde

⏰ Temps Plein

🟡 Intermédiaire

🟠 Senior

🚰 Ingénieur Data

🗣️🇺🇸🇬🇧 Anglais requis