Qualitative Evaluation Engineer

🕒 vor 10 Tagen

Jetzt Bewerben

Ähnliche Remote-Jobs finden

E-Mail-Benachrichtigung für neue Jobs einrichten

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen

Luma AI

WebsiteLinkedInAlle Stellen

2 - 10 Mitarbeiter

🤖 Künstliche Intelligenz

☁️ SaaS

📱 Medien

💰 €90.000.000 Series B im 2025-01

Artificial Intelligence • SaaS • Media

Luma AI ist ein in Palo Alto ansässiges Unternehmen, das multimodale generative KI-Modelle und kreative Workflow-Tools entwickelt, die sich auf die Produktion von Video, Bild, Audio und Text konzentrieren. Luma bietet Modelle und Produkte wie Ray (Videogenerierung), UNI-1/Uni-1. 1 (Markenintelligenzmodelle) und eine API/Unternehmenslösungen, die es kreativen Teams ermöglichen, cineastische Qualitätsassets mit Markenanpassung zu erzeugen, zu bearbeiten und zu steuern. Sie legen Wert auf Pionierforschung (Open Physical AI Lab), interne Modellentwicklung und Produkte für kreative Teams, Agenturen und Produktionsservices. Luma bietet zudem APIs, Unternehmenspläne, ein kreatives Partnerprogramm und Lernressourcen an.

Beschreibung

• Evaluate generative model performance across diverse tasks, prompts, and modalities, and surface the failure modes, regressions, and edge cases that hurt product quality • Build and maintain qualitative evaluation frameworks that are scalable and reusable • Translate high-level product goals into concrete evaluative criteria • Lead qualitative studies, side-by-side comparisons, and human-in-the-loop evaluations • Turn nuanced judgments into clear feedback that informs fine-tuning, dataset curation, and product UX • Work closely with technical artists and engineers to keep evaluations aligned with model capabilities and real use cases

🎯 Anforderungen

• 5+ years in product evaluation, UX research, model testing, or similar structured qualitative assessment • Master's or higher in Cognitive Science, HCI, Design Research, Psychology, Media Studies, or a related field • Systems thinking: you can define abstract qualities like believability or scene coherence in clear evaluative terms • Comfort working across engineers, researchers, and creatives

🏖️ Vorteile

• Luma's mission is to build unified general intelligence that can generate, understand, and operate in the physical world • Excellent written communication and the ability to synthesize nuanced judgment into actionable insight • Deep familiarity with creative workflows for generative models (animation, filmmaking, digital art, VFX)