Machine Learning Engineer, Core Evaluations

🕒 vor 3 Monaten

🇺🇸 Vereinigte Staaten – Remote

⏰ Vollzeit

🟡 Mittelstufe

🟠 Senior

🤖 Machine-Learning-Entwickler

🦅 H1B-Visum-Sponsor

Dieses Unternehmen hat in der Vergangenheit H1B-Visa gesponsert.

Jetzt Bewerben

Ähnliche Remote-Jobs finden

E-Mail-Benachrichtigung für neue Jobs einrichten

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen

Cantina

WebsiteLinkedInAlle Stellen

51 - 200 Mitarbeiter

Gegründet founded by Sean Parker

🤖 Künstliche Intelligenz

🎮 Gaming

🌍 Soziale Wirkung

Artificial Intelligence • Gaming • Social Impact

Cantina ist ein Unternehmen, das sich auf die Erstellung fortschrittlicher KI-Charaktere spezialisiert hat, die sprechen, fühlen und ihre Abenteuer mit Selfies festhalten können. Es bietet eine Plattform, auf der Nutzer ihre KI-Bots in Online-Communities entfalten können, was diesen lebensechten, sozialen Wesen ermöglicht, mit Menschen zu interagieren. Cantina konzentriert sich auf den Aufbau von Netzwerken von KI-Influencern und ermutigt Nutzer, ihre eigenen Sammlungen von KI-Bots zu erkunden und zu erstellen. Die Mission des Unternehmens ist es, ein interaktives Universum zu schaffen, das Kreativität und soziale Interaktion durch digitale Persönlichkeiten und KI-Technologie fördert.

Beschreibung

• Designing model evaluation pipelines for models in development and production • Designing user studies for subjective model evaluations. • Converting requirements into measurable metrics. • Designing and developing automated evaluation dashboard to see model performances and compare results. • Training new models to capture new and different evaluation metrics. • Communicating with the model team to help design better models based on the evaluation results. • Communicating with the data team to help decide the type of data necessary to improve model performance. • Communication with the product-manager to make sure product requirements are correctly measured. • Help grow the evaluation team as the founding member. • Lead the evaluation team in the future.

🎯 Anforderungen

• Strong experience and intuition for designing metrics that capture model performance. • Strong experience with designing user studies on Mechanical Turk or similar platforms. • Strong experience with model training and fine-tuning for model evaluation. • Strong statistical knowledge and experience to statistically compare evaluation results and take decisions. • Very strong engineering and programming skills. • Experience with training ASR, TTS models. • Experience at ML teams working on large-scale machine learning problems. (>3B models with >1m hours of data)

🏖️ Vorteile

•