Аналитик продукта AI — Voice AI и аналитика данных@ Medvidi

О позиции

MEDvidi — это платформа ментального здоровья на базе ИИ, которая помогает пациентам по всей территории США получать лечение от СДВГ, тревожности, депрессии и других психических расстройств. Мы ищем Аналитика продукта AI, который поможет нам оценивать, контролировать и улучшать Voice AI-агентов, взаимодействующих непосредственно с пациентами и автоматизирующих критические части пути пациента. Эта роль находится на пересечении продуктов, ИИ, инженерии и операций. Вы будете исследовать, как ИИ ведет себя в производственной среде, выявлять паттерны сбоев, измерять качество ИИ и помогать командам принимать более обоснованные продуктовые решения, используя данные из реального мира.

Чем вы будете заниматься

• Аналитика для Voice AI-агентов и систем разговорного ИИ.
• Исследование галлюцинаций, несоответствий, молчаливых сбоев и ухудшения качества.
• Анализ транскрипций звонков, логов разговоров, выходов ИИ и операционных наборов данных.
• Оценка качества ИИ и измерение надежности.
• Создание систем мониторинга и панелей управления для оценки производительности ИИ.
• Обнаружение изменений качества, аномалий и возникающих режимов сбоев.
• Измерение влияния ИИ на опыт пациента, операции и бизнес-результаты.
• Сотрудничество с командами продуктов, инженерии, QA и операций.

Что мы ожидаем

• 3+ года опыта в аналитике продуктов, аналитике данных или операционной аналитике.
• Сильные навыки SQL.
• Знание Python для аналитических исследований и работы с большими текстовыми наборами данных.
• Понимание ограничений LLM, галлюцинаций, чувствительности к подсказкам и режимам сбоев ИИ.
• Опыт создания систем мониторинга, аналитических структур или панелей управления.
• Сильные коммуникативные навыки и способность переводить идеи в продуктовые решения.
• Свободное владение русским и английским языками на уровне B2+.
• Рабочие часы, совпадающие с CET.

Будет плюсом

• Опыт работы с разговорным ИИ или ИИ-агентами.
• Опыт оценки выходов LLM.
• Опыт работы с метриками качества ИИ и оценочными структурами.
• Опыт работы с ML-пайплайнами или продуктами на базе ИИ.

Что мы предлагаем

• Работа над одним из самых заметных ИИ-продуктов внутри компании.
• Анализ реальных систем Voice AI, используемых пациентами каждый день.
• Помощь в формировании будущего ИИ в здравоохранении.
• Высокая степень ответственности и прямое влияние на продуктовые решения.
• Полностью удаленное долгосрочное сотрудничество на условиях B2B.
• Медицинская страховка, компенсация за здоровье, оплачиваемый отпуск и больничный.
• Персонализированные уроки английского языка через Preply.