Tech Lead Data Scientist, AI Evaluation – Monitoring

🕒 Abril 30

🔔 Pennsylvania – Remoto

🔔 Pennsylvania – Remote

⏰ Tempo Integral

🟠 Sênior

📊 Cientista de Dados

🦅 Patrocina Visto H1B

Esta empresa já patrocinou vistos H1B no passado.

Candidatar-se

Encontrar Vagas Remotas Similares

Receber Emails de Vagas Remotas

📊 Verifique sua pontuação de currículo para esta vaga

Melhore suas chances de conseguir uma entrevista verificando sua pontuação de currículo antes de se candidatar.

Enviar Currículo

Geisinger

SiteLinkedInTodas as Vagas

10.000+ funcionários

Fundada em 1915

💊 Farmacêutico

🧘 Bem-estar

Healthcare • Pharmaceuticals • Wellness

Geisinger é uma organização de saúde que atende comunidades na Pensilvânia há mais de um século, oferecendo serviços médicos essenciais e soluções inovadoras em saúde. A organização enfatiza a diversidade, o desenvolvimento de carreira e a criação de um ambiente de apoio para seus funcionários, enquanto se esforça para melhorar a saúde e o bem-estar de seus pacientes por meio de diversos programas e iniciativas comunitárias. Geisinger é reconhecida como um dos sistemas de saúde mais inovadores e está comprometida em moldar o futuro da saúde com foco no cuidado ao paciente e na inclusividade.

Descrição

• Principal technical expert for how Geisinger evaluates, monitors, and optimizes AI systems • Set technical direction for AI evaluation across a growing portfolio • Provide technical leadership to a team of data analysts • Partner with AI program teams to improve validation and monitoring methods • Design validation studies and monitoring plans for AI systems • Instrument production monitoring and define measurable metrics • Mentor analysts on methodology and technical rigor

🎯 Requisitos

• 6+ years in data science, statistics, ML engineering, or applied quantitative research • Strong foundation in experimental design and causal inference • Hands-on experience designing and running model evaluation studies in real production settings • Experience evaluating LLM or generative AI systems • Proven ability to translate ambiguous failure modes into concrete evaluation designs • Strong fluency in Python and SQL • Experience with fairness and equity evaluation for ML systems • MS or PhD in a quantitative field preferred

🏖️ Benefícios

• Healthcare benefits from day one • Vision insurance • Dental insurance • Domestic partner benefits • Collaboration and cooperation atmosphere