Qualitative Evaluation Engineer

🕒 il y a 10 jours

Postuler Maintenant

Trouver des Emplois à Distance Similaires

Configurer une alerte email pour les nouveaux emplois

📊 Vérifiez votre score de CV pour ce poste

Améliorez vos chances d'obtenir un entretien en vérifiant votre score de CV avant de postuler.

Télécharger le CV

Luma AI

Site WebLinkedInTous les Emplois

2 - 10 employés

🤖 Intelligence artificielle

☁️ SaaS

📱 Médias

💰 €90 000 000 Series B en 2025-01

Artificial Intelligence • SaaS • Media

Luma AI est une entreprise basée à Palo Alto qui développe des modèles d'IA générative multimodale et des outils de flux de travail créatif axés sur la production de vidéos, d'images, d'audio et de textes. Luma propose des modèles et des produits tels que Ray (génération de vidéos), UNI-1/Uni-1. 1 (modèles d'intelligence de marque), et une API/des offres d'entreprise qui permettent aux équipes créatives de générer, éditer et réaliser des contenus de qualité cinématique avec une continuité de marque. Ils mettent l'accent sur la recherche d'avant-garde (Open Physical AI Lab), le développement interne de modèles, et des produits pour les équipes créatives, les agences et les services de production. Luma fournit également des API, des plans d'entreprise, un programme de partenariats créatifs et des ressources d'apprentissage.

Description

• Evaluate generative model performance across diverse tasks, prompts, and modalities, and surface the failure modes, regressions, and edge cases that hurt product quality • Build and maintain qualitative evaluation frameworks that are scalable and reusable • Translate high-level product goals into concrete evaluative criteria • Lead qualitative studies, side-by-side comparisons, and human-in-the-loop evaluations • Turn nuanced judgments into clear feedback that informs fine-tuning, dataset curation, and product UX • Work closely with technical artists and engineers to keep evaluations aligned with model capabilities and real use cases

🎯 Exigences

• 5+ years in product evaluation, UX research, model testing, or similar structured qualitative assessment • Master's or higher in Cognitive Science, HCI, Design Research, Psychology, Media Studies, or a related field • Systems thinking: you can define abstract qualities like believability or scene coherence in clear evaluative terms • Comfort working across engineers, researchers, and creatives

🏖️ Avantages

• Luma's mission is to build unified general intelligence that can generate, understand, and operate in the physical world • Excellent written communication and the ability to synthesize nuanced judgment into actionable insight • Deep familiarity with creative workflows for generative models (animation, filmmaking, digital art, VFX)