Fullstack Data Engineer

🕒 vor 2 Monaten

Jetzt Bewerben

Ähnliche Remote-Jobs finden

E-Mail-Benachrichtigung für neue Jobs einrichten

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen

Codvo.ai

WebsiteLinkedInAlle Stellen

51 - 200 Mitarbeiter

Gegründet 2019

🔒 Cybersecurity

☁️ SaaS

AI • Cybersecurity • SaaS

Codvo. ai ist ein Technologieunternehmen, das sich auf die Bereitstellung strategischer Unternehmenslösungen durch fortschrittliche, KI-gesteuerte Innovation spezialisiert hat. Das Unternehmen konzentriert sich darauf, Unternehmensdaten in messbaren Wert zu verwandeln, indem es Unternehmen hilft, das Wachstum mit kundenspezifischen KI-Implementierungen zu beschleunigen, die speziell auf die Herausforderungen verschiedener Branchen zugeschnitten sind. Zu den umfangreichen Dienstleistungen gehören KI/ML-Automatisierung, Anwendungsentwicklung, Datenanalytik, Cybersicherheit und digitale Transformation, um sicherzustellen, dass Organisationen in einer sich schnell entwickelnden digitalen Landschaft gedeihen können.

Beschreibung

• Design, build, and maintain Databricks data pipelines (ETL/ELT) for ingestion, transformation, and orchestration using Spark/Delta Lake/Databricks Workflows. • Operationalize machine learning models by building inference pipelines that invoke models authored by data scientists (batch or real-time), ensuring consistency between training and inference environments. • Ensure data reliability, quality, and observability through robust validation, monitoring, alerting, and automated recovery mechanisms. • Collaborate closely with data scientists to productionize models, manage model deployment lifecycles, and optimize inference performance and cost. • Implement best-practice DevOps/MLOps processes such as CI/CD for pipelines, model versioning, environment promotion, and infrastructure-as-code. • Optimize performance and cost across compute clusters, jobs, and storage layers. • Implement and manage the enterprise data catalog, including schema design, table ownership, lineage, governance, and documentation using Unity Catalog. • Experience with some Databricks infrastructure. • Experience with building BI dashboards and visualization. • Experience with coding agents and best practices (spec-driven development, etc.)

🎯 Anforderungen

• 8+ yrs experience • Databricks platform experience • Python development for data processing and ETL pipelines • Unity Catalog knowledge • AWS data services (S3, IAM, VPC, potentially Glue/Lambda) • Data lake/lakehouse architecture patterns • Dashboard building experience • RESTful API design and development (Flask, FastAPI, or similar) • Authentication/authorization patterns (OAuth, API keys, IAM roles) • Query optimization and performance tuning • PySpark optimization experience • ML/AI pipeline experience • Databricks AI/BI