Member of Technical Staff, Benchmarking

Stelle nicht auf LinkedIn

🕒 vor 14 Tagen

🇺🇸 Vereinigte Staaten – Remote

💵 $150.000 - $210.000 / Jahr

⏰ Vollzeit

🟡 Mittelstufe

🟠 Senior

🖥 Softwareentwickler

🗣️🇺🇸🇬🇧 Englisch erforderlich

Woher diese Stelle stammt

Veröffentlicht auf der Karriereseite von GenMD ↗der Karriereseite von GenMD, nicht über eine Jobbörse

Von Remote Rocketship zum ersten Mal gesehen vor 14 Tagen

Noch offen auf der Website von GenMD. Geprüft vor 1 Stunde.

Jetzt Bewerben
Logo of GenMD

GenMD

2 - 10 Mitarbeiter

🏥 Gesundheitswesen

🤖 Künstliche Intelligenz

☁️ SaaS

Healthcare • Artificial Intelligence • SaaS

GenMD ist ein Healthcare-Data-Unternehmen, das datenschutzwahrende digitale Zwillinge klinischer Datensätze erstellt. So können Forschende, Gesundheitssysteme und AI-Teams gemeinsam Daten analysieren und Modelle entwickeln, ohne personenbezogene Patientendaten offenzulegen. GenMD wird innerhalb des Cloud-Accounts eines Gesundheitssystems betrieben, erstellt synthetische Replikate, die die statistische Struktur der Originaldaten bewahren und gleichzeitig das Re-Identifizierungsrisiko minimieren, validiert Datenschutz und Datenqualität und ermöglicht geprüften Forschenden sowie führenden AI-Teams schnellen Zugriff auf nutzbare klinische Datensätze. Gesundheitssysteme behalten die Governance, können Partner ablehnen, die Datennutzung auditieren und Einnahmen erzielen, wenn Partner den Datenzugang lizenzieren.

Beschreibung

• Design and maintain clinical benchmarks for reasoning, longitudinal patient histories, multimodal records and tool use • Build end-to-end evaluation pipelines, including runs, scoring, dashboards and reports comparing models and training runs at scale • Create rubrics, automated graders and LLM-as-a-judge systems, and calibrate them against clinician review • Run systematic failure analysis, categorize failure modes, measure their frequency and feed results into dataset design and post-training • Work with clinical experts and partner AI teams to turn benchmark results into research papers and products • Build benchmarks and evaluation systems for real-world healthcare data and use findings to create data that closes model performance gaps

🎯 Anforderungen

• Hands-on experience evaluating or training LLMs (PyTorch, Hugging Face or similar) • Strong Python and data engineering skills • Comfortable with large tabular and text datasets • SQL/BigQuery is a plus • Ability to design evaluations that measure meaningful outcomes and resist shortcuts • B.Sc. or higher in CS, ML, NLP, biomedical informatics or a related field • About 4 hours of daily overlap with Pacific Time (roughly 9 AM to 1 PM PT) • LLM/NLP publications preferred • Experience with clinical data or medical benchmarks is nice to have • Experience with RL from verifiable rewards, reward modeling or post-training data is nice to have

🏖️ Vorteile

• Equity • Well funded, revenue-generating company • Remote work arrangement

Jetzt Bewerben

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Ähnliche Jobs

🕒 vor 14 Tagen

Davis Wright Tremaine LLP

1001 - 5000

⚖️ Rechtswesen

💼 Beratung

🤝 B2B

Modern workplace engineering manager leading endpoint operations and cloud modernization for AmLaw 100 law firm. Managing Intune, Autopilot, security, virtual desktops, and five engineers.

🇺🇸 Vereinigte Staaten – Remote

💵 $170.000 - $181.000 / Jahr

⏰ Vollzeit

🟠 Senior

🔴 Experte

🖥 Softwareentwickler

🗣️🇺🇸🇬🇧 Englisch erforderlich

Android

Azure

Citrix

Cloud

iOS

MacOS

VMware

🕒 vor 14 Tagen

Pennant

1001 - 5000

🏥 Gesundheitswesen

⚕️ Krankenversicherung

🧘 Wellness

Director of Engineering leading AI-native software for Pennant’s post-acute healthcare businesses. Owning architecture, delivery, engineering teams, and HIPAA-grade platform operations.

🇺🇸 Vereinigte Staaten – Remote

⏰ Vollzeit

🟠 Senior

🔴 Experte

🖥 Softwareentwickler

🗣️🇺🇸🇬🇧 Englisch erforderlich

🕒 vor 14 Tagen

Brown and Caldwell

1001 - 5000

💼 Beratung

🏗️ Bauwesen

🏥 Gesundheitswesen

Digital Technology Consultant leading data governance, BI, AI, and digital transformation for Brown and Caldwell’s water and wastewater clients. Developing technology roadmaps and implementing integrated analytics solutions.

🇺🇸 Vereinigte Staaten – Remote

💵 $95.000 - $155.000 / Jahr

⏰ Vollzeit

🟡 Mittelstufe

🟠 Senior

🖥 Softwareentwickler

🗣️🇺🇸🇬🇧 Englisch erforderlich

Cyber Security

🕒 vor 15 Tagen

Cordis

1001 - 5000

🏭 Fertigung

🏥 Gesundheitswesen

💊 Pharmazie

AI applications developer building governed automations and intelligent workflows for Cordis, a cardiovascular technology company. Improving business processes through low-code platforms, integrations, and emerging AI.

🗣️🇺🇸🇬🇧 Englisch erforderlich

Cyber Security

🕒 vor 15 Tagen

Koniag Government Services

1001 - 5000

🏛️ Regierung

🎖️ Verteidigung

💼 Beratung

Senior web, mobile, and DevOps developer modernizing federal government systems on Microsoft Azure. Building responsive applications, CI/CD pipelines, and compliant cloud infrastructure for federal clients.

🇺🇸 Vereinigte Staaten – Remote

⏰ Vollzeit

🟠 Senior

🖥 Softwareentwickler

🗣️🇺🇸🇬🇧 Englisch erforderlich

Entwickelt von Lior Neu-ner. Ich freue mich über Ihr Feedback — kontaktieren Sie mich per DM oder per E-Mail support@remoterocketship.com
Follow Remote Rocketship on LinkedInFollow Remote Rocketship on InstagramFollow Remote Rocketship on FacebookFollow Remote Rocketship on TikTok