Ingenieur/in für Aufgabenentwicklung

Stelle nicht auf LinkedIn

🔥 vor wenigen Sekunden

Jetzt Bewerben

Ähnliche Remote-Jobs finden

E-Mail-Benachrichtigung für neue Jobs einrichten

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen

METR

WebsiteLinkedInAlle Stellen

11 - 50 Mitarbeiter

Gegründet 2022

🤖 Künstliche Intelligenz

☁️ SaaS

Artificial Intelligence • Research • SaaS

METR ist eine Forschungsorganisation, die sich auf die Bewertung und das Verständnis der Fähigkeiten und Risiken von fortschrittlichen KI-Systemen konzentriert. Sie entwickeln und führen Tests durch, um die Leistung von KI, insbesondere in autonomen Fähigkeiten und in der KI-Forschung und -Entwicklung, zu messen. Durch die Zusammenarbeit mit führenden KI-Unternehmen wie Anthropic und OpenAI zielt METR darauf ab, unabhängige Bewertungen zu verbessern, um die aufkommenden Risiken fortschrittlicher KI-Technologien umfassend zu managen.

Beschreibung

• Entwickeln schwieriger, neuartiger Aufgaben für KI-Modelle, die auch bei zunehmendem Zeithorizont der Modelle anspruchsvoll bleiben • Durchführung von Qualitätssicherung für bestehende Aufgaben, Überprüfung der Lösbarkeit und Sicherstellung, dass Modelle nur die notwendigen Informationen erhalten • Erstellung von Baseline-Aufgaben in Fachbereichen, wenn dies hilfreich ist • Bewertung von Aufgabenabschlüssen durch KI-Systeme oder menschliche Baselines • Verbesserung der Infrastruktur und der Workflows für die Aufgabenentwicklung • Mitarbeit an Evaluierungen führender KI-Systeme zur Unterstützung der METR‑Time‑Horizons-Methodik

🎯 Anforderungen

• Mehrjährige Erfahrung in der Arbeit an komplexen Software-Engineering-Projekten und Codebasen • Erfahrung im Aufbau anspruchsvoller, idealerweise agentenbasierter KI-Evaluationen • Erfahrung mit Evaluierungen wie RE-Bench, HCAST, SWE-bench Verified, Cybench oder GPQA • Idealerweise Erfahrung mit dem Inspect-Framework • Hohe Detailgenauigkeit, einschließlich des Erkennens von Fehl­spezifikationen und Mehrdeutigkeiten • Vertrautheit mit der METR-Infrastruktur, einschließlich Hawk, ist von Vorteil • Vertrautheit mit der Methodik hinter METRs Time‑Horizons-Arbeit ist von Vorteil • Verfügbarkeit von 20–40 Stunden pro Woche • Mindestens 1 Stunde Überschneidung mit dem Arbeitstag in der Pacific Coast Time (Pazifische Küstenzeit)

🏖️ Vorteile

• Flexible Arbeitszeitgestaltung nach eigener Vereinbarung • Remote-Arbeit weltweit • Flexible Arbeitszeit von 20–40 Stunden pro Woche • Personen, die mehr als 80 Stunden beitragen, werden in der finalen Forschungsarbeit anerkannt (auf Wunsch)