AI Evaluation Specialist

Vaga não está no LinkedIn

🕒 Julho 9

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $70 / hora

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇺🇸🇬🇧 Inglês obrigatório

Candidatar-se
Encontrar Vagas Remotas Similares

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Logo of Weekday (YC W21)

Weekday (YC W21)

11 - 50 funcionários

Fundada em 2021

💼 Consultoria

👥 RH Tech

☁️ SaaS

Consulting • HR Tech • SaaS

A Weekday é uma plataforma moderna de recrutamento que combina tecnologias de IA com um vasto banco de dados de potenciais candidatos, com o objetivo de agilizar e simplificar o processo de contratação para empresas na Índia. A empresa oferece diversos serviços, incluindo uma abordagem proativa de outreach que ajuda empregadores a se conectarem com talentos de ponta, além de ferramentas para que candidatos se candidatem facilmente a vagas. O foco da Weekday em engajamento de candidatos por múltiplos canais — incluindo e-mail, WhatsApp e ligações telefônicas — a diferencia no competitivo mercado de agências de recrutamento.

Descrição

• Review AI-generated content for accuracy, logical reasoning, completeness, and clarity. • Identify factual errors, reasoning gaps, inconsistencies, and unsupported conclusions. • Assess responses using structured evaluation frameworks and detailed quality guidelines. • Write clear, concise, and evidence-based rationales explaining evaluation decisions. • Highlight both strengths and areas for improvement in AI-generated outputs. • Apply consistent judgment across a wide range of evaluation tasks. • Follow detailed project instructions and standardized assessment criteria. • Ensure evaluations are objective, accurate, and reproducible. • Complete assignments independently while maintaining high quality standards.

🎯 Requisitos

• Bachelor's degree from a globally recognized university (top-ranked institutions preferred). • Excellent analytical thinking and problem-solving abilities. • Strong written communication skills with the ability to explain complex reasoning clearly and precisely. • Exceptional critical reading skills, including the ability to identify: • Nuanced arguments • Implicit meaning • Logical inconsistencies • Missing context • Weak or unsupported reasoning • Strong attention to detail and ability to consistently apply structured evaluation guidelines. • Ability to work independently and manage assigned tasks efficiently. • Native-level English fluency. • Experience in content evaluation, research, quality assurance, editing, or analytical review (preferred). • Familiarity with artificial intelligence, large language models, or AI evaluation methodologies (preferred). • Experience working with structured annotation or assessment frameworks (preferred). • Ability to produce thoughtful, objective, and well-supported written evaluations under defined quality standards (preferred).

Candidatar-se

Vagas Similares

🕒 Julho 7

WaveStrong, Inc.

201 - 500

💼 Consultoria

🏥 Saúde

⚖️ Jurídico

Securiti.ai SME designing and operationalizing an enterprise privacy-compliance program with Securiti.ai platform capabilities for DSAR, DPIA, and consent.

🇺🇸 Estados Unidos – Remoto (EUA)

⏳ Contrato/Temporário

🟢 Júnior

🟡 Pleno

🤖 Inteligência Artificial

🗣️🇺🇸🇬🇧 Inglês obrigatório

🕒 Junho 12

Invisible Technologies

201 - 500

💼 Consultoria

🏥 Saúde

📦 Logística

Sourcing independent Audio Evaluation Specialists for AI benchmarking project assessing audio models. Design evaluation frameworks and contribute to high-quality audio datasets.

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $6 - $65 / hora

💰 $100.000.000 Series unknown em 2025-10

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇧🇷🇵🇹 Português obrigatório

🗣️🇺🇸🇬🇧 Inglês obrigatório

🕒 Junho 12

Invisible Technologies

201 - 500

💼 Consultoria

🏥 Saúde

📦 Logística

Freelance AI Trainer Project seeking Audio Evaluations Specialist for evaluating conversational AI outputs through structured training data design. Role includes auditing performance and scenario execution.

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $6 - $65 / hora

💰 $100.000.000 Series unknown em 2025-10

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇩🇪 Alemão obrigatório

🗣️🇺🇸🇬🇧 Inglês obrigatório

🕒 Junho 9

RWS Group

5001 - 10000

💼 Consultoria

🏥 Saúde

⚖️ Jurídico

Speech AI Evaluation Specialist supporting AI-generated content improvement in Vietnamese. Engaging in voice conversations with AI models and evaluating responses for relevance and quality.

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $15 / hora

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇻🇳 Vietnamita obrigatório

🗣️🇺🇸🇬🇧 Inglês obrigatório

🕒 Junho 9

RWS Group

5001 - 10000

💼 Consultoria

🏥 Saúde

⚖️ Jurídico

Speech AI Evaluation Specialist supporting improvement of AI-generated content in Chinese Simplified. Participate in evaluations and provide feedback on AI model responses.

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $15 / hora

⏳ Contrato/Temporário

🟡 Pleno

🟠 Sênior

🤖 Inteligência Artificial

🗣️🇨🇳 Chinês obrigatório

🗣️🇺🇸🇬🇧 Inglês obrigatório