Senior Manager, AI Performance & Operations

Vaga não está no LinkedIn

🕒 Maio 21

🇺🇸 Estados Unidos – Remoto (EUA)

💵 $110.000 - $172.000 / ano

⏰ Tempo Integral

🟠 Sênior

🤖 Inteligência Artificial

👻 Score fantasma 35%

O que significa: quão provável esta vaga está aberta sem contratação ativa.Como ler: 60% ou mais significa que achamos que é uma vaga fantasma. Pontuações mais baixas preocupam menos.Como pontuamos: tempo em aberto, republicações, vagas abertas vs tamanho do time, rapidez para fechar vagas, e se o salário está divulgado.Observação: é uma estimativa de dados públicos, não um julgamento da empresa. Vagas reais podem ter pontuação alta, então use como uma dica, não como um fato.

Candidatar-se

Encontrar Vagas Remotas Similares

Configurar Alerta de Email para Novas Vagas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Devoted Health

SiteLinkedInTodas as Vagas

1001 - 5000 funcionários

Fundada em 2017

🏥 Saúde

⚕️ Seguro de Saúde

🧘 Bem-estar

Healthcare • Healthcare Insurance • Wellness

A Devoted Health é uma empresa de saúde que oferece planos Medicare Advantage projetados para fornecer cobertura de saúde abrangente com benefícios adicionais como cuidados dentários, óculos, associações a academias e medicamentos prescritos a preços competitivos. A empresa enfatiza o suporte e serviço ao membro, garantindo que os clientes possam navegar facilmente por seus benefícios e acessar os serviços de saúde necessários. A Devoted Health está comprometida em ajudar os clientes a economizar dinheiro e melhorar sua saúde e bem-estar por meio de um pacote completo de benefícios e suporte.

Descrição

• Own the health of major voice and text AI workflows, ensuring business, quality, safety, and operational outcomes are met. • Maintain a current view of all major workflows, including status, maturity, failure modes, and next actions. • Monitor weekly indicators (containment, escalation, complaints) and oversee production dashboards to track behavior independently. • Lead response for AI regressions; distinguish between model, prompt, or orchestration issues and drive post-mortems to closure. • Run structured cycles (hypothesis, testing, rollout/rollback) for 'mini-launches' like model swaps, prompt changes, and tool updates. • Design eval systems using golden datasets, LLM-as-judge workflows, and human review queues for production and pre-production. • Guide new workflows during incubation to ensure they launch with proper instrumentation, eval coverage, and safety models. • Translate technical changes into plain language for leadership, explaining what broke, why it matters, and who is fixing it.

🎯 Requisitos

• Strong production experience with LLMs, RAG, voice AI, agentic orchestration, or equivalent ML systems. • Demonstrated experience designing or operating rubrics, scoring frameworks, regression tests, and production-sampling workflows. • A clear mental model for distinguishing failure modes, such as model reasoning, tool failure, retrieval issues, and workflow logic. • Comfort with active experimentation—including prompt/context tuning, retrieval redesign, and safe model migrations—beyond simple issue triage. • Excellent cross-functional judgment and the ability to communicate clearly in ambiguous, high-accountability environments. • Deep personal accountability with a drive to own results rather than just producing recommendations. • Experience in healthcare, regulated workflows, contact center operations, or high-stakes service quality/reliability functions.

🏖️ Benefícios

• Employer sponsored health, dental and vision plan with low or no premium • Generous paid time off • $100 monthly mobile or internet stipend • Stock options for all employees • Bonus eligibility for all roles excluding Director and above; Commission eligibility for Sales roles • Parental leave program • 401K program • And more....