Senior QA Engineer

🕒 vor 24 Tagen

🇺🇸 Vereinigte Staaten – Remote

⏰ Vollzeit

🟠 Senior

🔧 QA-Ingenieur (Qualitätssicherung)

🦅 H1B-Visum-Sponsor

Dieses Unternehmen hat in der Vergangenheit H1B-Visa gesponsert.

👻 Geisterscore 10%

Was es bedeutet: die Wahrscheinlichkeit, dass für diese Stelle niemand wirklich einstellt.So liest du es: 60 % oder höher heißt, wir halten das für einen Geisterjob. Niedrigere Werte sind weniger bedenklich.Wie wir werten: Dauer offen, Neuveröffentlichungen, offene Stellen vs Teamgröße, wie schnell Stellen geschlossen werden, und ob ein Gehalt angegeben ist.Hinweis: eine Schätzung aus öffentlichen Daten, kein Urteil über das Unternehmen. Echte Stellen können hoch punkten, nutze es also als Hinweis, nicht als Fakt.

Jetzt Bewerben

Ähnliche Remote-Jobs finden

Vi

WebsiteLinkedInAlle Stellen

51 - 200 Mitarbeiter

🏥 Gesundheitswesen

💼 Beratung

📦 Logistik

Healthcare • Consulting • Logistics

Vi ist ein Unternehmen, das künstliche Intelligenz nutzt, um Gesundheitsorganisationen dabei zu unterstützen, die Gesundheitsergebnisse ihrer Mitglieder sowie die finanziellen Erträge zu verbessern. Das Unternehmen bietet eine AI SaaS-Plattform, die Lösungen für effiziente Akquise, personalisierte Interaktion und vorausschauende Bindung im gesamten Mitgliederlebenszyklus anbietet. Vi konzentriert sich darauf, die Akquise, Einschreibung, Beteiligung, Bindung, Upsells und die Gesundheitsergebnisse mit überlegener Rentabilität zu maximieren. Ihre Plattform ist darauf ausgelegt, die Kosten pro Akquise zu senken, die Mitgliederbindung und -engagement zu verbessern und Abläufe mit ihrer generativen KI-Technologie zu transformieren. Vi arbeitet mit führenden globalen Gesundheitsunternehmen zusammen, um Ergebnisse in großem Maßstab zu erzielen, während die Datenschutz- und Datensicherheitsstandards eingehalten werden.

Beschreibung

• Own quality for voice agents that call real patients, providers, and caregivers • Build test and evaluation systems for engineering development • Define release criteria and determine what must pass before and after client launches • Analyze call recordings, transcripts, latency traces, and logs to isolate failures across speech-to-text, models, text-to-speech, telephony, and integrations • Create reproducible defect tickets from failed calls • Develop golden test sets, simulated calls, judged transcripts, classification and extraction accuracy tests, and structured-output validation • Set tolerances and maintain trustworthy regression coverage for non-deterministic systems • Create test plans, regression suites, bug triage processes, reproductions, and CI integration for the surrounding product • Monitor live calls after release for drift and degradation and escalate issues to engineers • Red-team agents for prompt injection, off-script behavior, unauthorized identity claims, medical-advice risks, guardrails, and access controls • Test products operated by Vi Operate, which places AI agents into the daily operations of health systems, providers, and pharma organizations; Augment provides the underlying voice capability

🎯 Anforderungen

• Experience testing a production voice agent that talks to people on the phone; ability to diagnose a real failure and identify the faulty layer • Experience testing a language-model system in production and explaining how its performance was evaluated • Strong classical QA experience, including test strategy, test planning, regression suites, bug triage, and release processes • Experience making non-deterministic output testable and explaining testing tradeoffs • Python proficiency and test automation; ability to build tooling and integrate it into CI • Sound judgment about defect severity and patient-impacting risks • Systems mindset focused on component seams, unexpected inputs, and access-control risks • Remote work aligned with EST/CT hours • Nice-to-have qualifications: • Background in IVR, contact center, or CCaaS quality, including Genesys, NICE, Five9, Amazon Connect, Twilio, or similar • Experience with audio and network condition testing, including codecs, jitter, packet loss, barge-in, and interruption handling • Familiarity with LLM-as-judge harnesses, prompt regression frameworks, or simulated conversation testing • Healthcare or pharma experience and comfort working under HIPAA • Experience establishing a QA function • Load and performance testing on real-time systems • Spanish proficiency sufficient to evaluate agent calls

📊 Überprüfen Sie Ihre Lebenslauf-Bewertung für diese Stelle

Verbessern Sie Ihre Chancen auf ein Vorstellungsgespräch, indem Sie Ihre Lebenslauf-Bewertung vor der Bewerbung überprüfen.

Lebenslauf hochladen