Research Engineer, Coding Evaluation – Training Data

🕒 vor 3 Monaten

🇺🇸 Vereinigte Staaten – Remote

⏰ Vollzeit

🟡 Mittelstufe

🟠 Senior

📚 Forschungsingenieur

👻 Geisterscore 45%

Was es bedeutet: die Wahrscheinlichkeit, dass für diese Stelle niemand wirklich einstellt.So liest du es: 60 % oder höher heißt, wir halten das für einen Geisterjob. Niedrigere Werte sind weniger bedenklich.Wie wir werten: Dauer offen, Neuveröffentlichungen, offene Stellen vs Teamgröße, wie schnell Stellen geschlossen werden, und ob ein Gehalt angegeben ist.Hinweis: eine Schätzung aus öffentlichen Daten, kein Urteil über das Unternehmen. Echte Stellen können hoch punkten, nutze es also als Hinweis, nicht als Fakt.

Jetzt Bewerben

Ähnliche Remote-Jobs finden

Surge AI

WebsiteLinkedInAlle Stellen

51 - 200 Mitarbeiter

Gegründet 2020

🤖 Künstliche Intelligenz

🔌 API

☁️ SaaS

💰 €25.000.000 Series A im 2020-07

Artificial Intelligence • API • SaaS

Surge AI ist ein Unternehmen, das hochwertige Trainingsdaten und Daten-Labeling-Lösungen für Machine-Learning-Teams bereitstellt. Es bietet eine API-gesteuerte SaaS-Plattform, die Annotation durch Menschen, Qualitätskontrolle und Werkzeuge für das Sammeln, Validieren und Verwalten von Datensätzen kombiniert, um die Modellentwicklung zu beschleunigen und die Modellleistung zu verbessern.

Beschreibung

• Own end-to-end coding data projects, from initial scoping and pilot design through execution, iteration, and scale-up. • Design agentic training workflows and task structures that mirror real-world SWE work (e.g., refactoring, debugging, code review, large-repo navigation, tool use). • Define and iterate on rubrics, golden sets, and reward signals that capture true engineering value, not just “does it compile.” • Evaluate data and worker output with strong SWE taste, and make calls about what meets the bar for frontier training. • Design and run qualification processes for coding workers, including hands-on assessments of their coding ability. • Set up or partner on complex technical environments (e.g., containers, repos, test harnesses, sandboxes, code execution infrastructure). • Partner with technical staff at our clients to translate high-level training goals into concrete projects and technical environments. • Collaborate closely with Surge engineering, product, and operations to improve our coding data products, internal tools, and execution processes.

🎯 Anforderungen

• 3–6+ years of professional software engineering experience building and maintaining real systems. • Strong coding ability in at least one mainstream language and comfort working in production codebases. • High “taste” for good engineering: you care about correctness, code quality, and how real engineering teams actually work. • Ability to reason about and debug technical environments, including containers, dependencies, and automated test setups. • Interest in owning projects end-to-end, including scoping, workflow design, execution, and continuous improvement. • Excellent written and verbal communication skills, with the ability to speak credibly with senior client engineers and translate fuzzy goals into actionable plans. • Excitement about AI/ML systems and the role of data, evaluation, and reward design in improving agentic coding capabilities.

🏖️ Vorteile

• Health insurance • 401(k) matching • Flexible work hours • Paid time off • Professional development opportunities

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen