Physician, Medical AI Evaluation

🕒 6 dias atrás

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇺🇸🇬🇧 Inglês obrigatório

De onde vem esta vaga

Publicada na página de carreiras da Mindrift ↗página de carreiras da Mindrift, não em um site de vagas

Vista pela primeira vez pelo Remote Rocketship 6 dias atrás

Ainda aberta no site da Mindrift. Verificada 11 horas atrás.

Candidatar-se
Logo of Mindrift

Mindrift

501 - 1000 funcionários

🤖 Inteligência Artificial

🏪 Marketplace

☁️ SaaS

Artificial Intelligence • Marketplace • SaaS

A Mindrift é uma plataforma que conecta profissionais qualificados e especialistas em diferentes áreas a projetos de treinamento e avaliação de IA conduzidos por grandes empresas de tecnologia. Parte da Toloka, a Mindrift recruta e seleciona freelancers — redatores, editores, especialistas em QA, cientistas e especialistas em diferentes áreas — para gerar dados, testar a segurança e o raciocínio dos modelos, avaliar a qualidade de mídias e criar cenários do mundo real que aprimoram o desempenho e a confiabilidade da IA. A empresa atua como um marketplace de talentos e uma plataforma de treinamento de IA sob demanda, integrando colaboradores por meio de avaliações e verificação de identidade e oferecendo projetos flexíveis e remunerados.

Descrição

• Evaluate clinical EHR vignettes paired with questions, proposed answers, and distractor trap answers across diagnosis and treatment tasks • Score clinical reasoning quality, vignette accuracy and completeness, answer correctness and gradeability, and trap quality • Check whether reasoning chains reach answers from vignette facts alone • Correct reasoning traces and write short rationales • Participate in a process involving three independent blind reads followed by physician adjudication • Complete flexible, task-based work through the platform • Pass qualification(s), join the project, complete tasks, and submit them for approval • Improve medical AI tools through evaluation of written clinical cases

🎯 Requisitos

• Medical degree (MD or DO) • Active, unrestricted US medical license, verified at onboarding and re-checked monthly • Board certification or completed residency training • Direct patient care experience; attending-level preferred • Broad, multi-system diagnostic and treatment experience in internal, family, emergency, or hospital medicine • Strong clinical reasoning, including differential diagnosis, next-step management, and application of evidence-based guidelines • Strong written English (C1+) • US-licensed physician based in an eligible US state • Prior experience in medical AI evaluation, clinical content or exam-question review, or medical annotation/QA is a plus • Not suitable for medical students, unlicensed medical graduates, non-physician clinicians, or non-clinical healthcare titles

🏖️ Benefícios

• Earnings per approved task: a fixed rate for each task, set in advance • Fully self-scheduled: no minimum hours and no set schedule • Remote work • No patient contact and no malpractice exposure • $50 one-time onboarding reward, paid once your first task on the project is approved • Quality incentives: additional earnings for high-quality approved tasks • Flexible contribution around other commitments • No time tracking or hour logging • No tiers or speed adjustments to the rate • Higher per-task rate for QA and adjudication tasks

Candidatar-se

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Vagas Similares

🕒 6 dias atrás

Invisible Technologies

201 - 500

💼 Consultoria

🏥 Saúde

📦 Logística

Swedish language specialist challenging and evaluating AI models for Meridial. Documenting linguistic failures and improving prompts and evaluation metrics.

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $8 - $65 / hora

💰 $100.000.000 Series unknown em 2025-10

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇸🇪 Sueco obrigatório

🗣️🇺🇸🇬🇧 Inglês obrigatório

🕒 6 dias atrás

Invisible Technologies

201 - 500

💼 Consultoria

🏥 Saúde

📦 Logística

STEM expert challenging and evaluating advanced language models for Meridial. Documenting reasoning failures and improving prompt engineering and evaluation metrics.

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $8 - $65 / hora

💰 $100.000.000 Series unknown em 2025-10

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇺🇸🇬🇧 Inglês obrigatório

🕒 Novembro 6

Invisible Technologies

201 - 500

💼 Consultoria

🏥 Saúde

📦 Logística

STEM specialist challenging and evaluating Meridial’s AI models across scientific and technical domains. Documenting reasoning failures and improving prompts and evaluation metrics in German.

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $8 - $65 / hora

💰 $100.000.000 Series unknown em 2025-10

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇩🇪 Alemão obrigatório

🗣️🇺🇸🇬🇧 Inglês obrigatório

🕒 Novembro 6

Invisible Technologies

201 - 500

💼 Consultoria

🏥 Saúde

📦 Logística

Freelance statistics expert challenging language models with advanced statistical problems. Documenting reasoning failures and improving AI prompt engineering and evaluation metrics.

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $6 - $65 / hora

💰 $100.000.000 Series unknown em 2025-10

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇺🇸🇬🇧 Inglês obrigatório

🕒 Novembro 6

Invisible Technologies

201 - 500

💼 Consultoria

🏥 Saúde

📦 Logística

Freelance sports specialist evaluating AI-generated sports content for accuracy, reasoning, and usefulness. Refining prompts and guidelines to train models supporting athletes, coaches, students, and analysts.

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $8 - $65 / hora

💰 $100.000.000 Series unknown em 2025-10

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇺🇸🇬🇧 Inglês obrigatório

Desenvolvido por Lior Neu-ner. Adoraria receber seu feedback — entre em contato por DM ou pelo e-mail support@remoterocketship.com
Follow Remote Rocketship on LinkedInFollow Remote Rocketship on InstagramFollow Remote Rocketship on FacebookFollow Remote Rocketship on TikTok