Lead Data Engineer

🕒 il y a 1 mois

🇺🇸 États-Unis – Télétravail

💵 $143 400 - $168 650 / an

⏰ Temps Plein

🟠 Senior

🚰 Ingénieur Data

🦅 Parrain de Visa H1B

Cette entreprise a parrainé des visas H1B par le passé.

Postuler Maintenant

Trouver des Emplois à Distance Similaires

Configurer une alerte email pour les nouveaux emplois

📊 Vérifiez votre score de CV pour ce poste

Améliorez vos chances d'obtenir un entretien en vérifiant votre score de CV avant de postuler.

Télécharger le CV

Egen

Site WebLinkedInTous les Emplois

501 - 1000 employés

Fondée en 2000

💼 Conseil

📦 Logistique

📣 Marketing

Consulting • Logistics • Marketing

Egen est une entreprise spécialisée dans l'ingénierie de solutions innovantes utilisant des plateformes, des données et de l'IA générative. Elle se concentre sur l'exploitation du potentiel des données pour autonomiser les organisations et les individus, offrant des services dans divers secteurs, y compris les communications, la santé et les solutions pour le secteur public. Leurs plateformes personnalisables répondent à des défis critiques en gestion urbaine, engagement client, soins cliniques et excellence opérationnelle, visant à générer des résultats impactants pour les clients.

Description

• Architect and optimize large-scale data platforms on Google Cloud, with BigQuery as the analytical backbone • Design and build unified batch and streaming pipelines that handle high-volume, mission-critical workloads • Lead infrastructure-as-code practices, ensuring environments are repeatable, secure, and version-controlled • Implement open table formats to enable cross-cloud and cross-engine data interoperability • Establish automated data quality, metadata, and lineage practices across the data estate • Partner with data scientists, analysts, and product teams to translate business needs into reliable data products • Mentor engineers, review designs, and raise the bar on engineering standards

🎯 Exigences

• 7+ years in data engineering, with at least 2 years in a lead or senior individual contributor capacity on Google Cloud-based platforms • **BigQuery (Advanced):** Deep knowledge of BigQuery architecture, including partitioning, clustering, slot management, storage optimization, and query execution tuning • **Streaming & Batch Pipelines:** Strong hands-on experience building unified pipelines using **Dataflow** (Apache Beam), **Dataproc**, and **Pub/Sub** • **Infrastructure as Code:** Production experience developing and managing cloud infrastructure with **Terraform** • **Open Table Formats:** Working knowledge of **Apache Iceberg**, including its role in enabling cloud and engine interoperability (e.g., across BigQuery, Spark, Snowflake) • **Data Governance:** Experience with **Dataplex** and **Data Catalog** for automated data quality checks, metadata tagging, and column-level lineage from source to destination

🏖️ Avantages

• Comprehensive Health Insurance • Paid Leave (Vacation/PTO) • Paid Holidays • Sick Leave • Parental Leave • Bereavement Leave • 401 (k) Employer Match • Employee Referral Bonuses