Лид ML-аналитики в Нейросервисы
Мы строим AI-сервисы для бизнеса на базе технологий Яндекса. Среди наших продуктов — Нейроюрист, Алиса Про и Нейросаппорт. Параллельно мы активно развиваем новые направления Нейросейлз и Нейробухгалтер. Ищем лида ML-аналитики, который поможет выстроить сильную функцию аналитики качества AI-сервисов.
Задачи
- Развитие аналитики качества LLM: поиск способов измерения качества моделей и AI-сценариев, построение системы метрик, улучшение процессов оценки, помощь командам в быстром и безопасном запуске изменений.
- Построение процессов ML-аналитики: от ручной разметки и продуктовых исследований до LLM-as-a-judge и автоматических проверок.
- Работа с несколькими сервисами одновременно: помощь AI-продуктам (Нейроюристу, Алисе Про, Нейросаппорту, Нейросейлзу и др.), быстрое переключение между задачами, поиск общих паттернов и перенос лучших практик между командами.
- Управление командой и её развитие: найм и развитие ML-аналитиков, формирование сильной инженерно-продуктовой культуры вокруг аналитики качества AI.
Требования
- Опыт руководства аналитиками, ML-аналитиками или quality-направлениями.
- Умение строить метрики качества для AI-систем.
- Уверенное владение SQL и Python.
Будет плюсом
- Работа с LLM-as-a-judge, synthetic data или автоматическими evals.
- Опыт построения ML-метрик или платформ оценки качества.
- Умение работать с AI-ассистентами, RAG-системами или агентами.
- Понимание специфики B2B- и enterprise-AI-продуктов.
Условия
ДМС Яндекса действует с первого месяца работы. Причём получить плановую или неотложную помощь можно и за рубежом — так что можно не бояться путешествовать.
