Компания: Яндекс Формат работы: гибрид
Задачи
- Оценка качества продукта с помощью экспертной оценки: развивать и дорабатывать методологию, позволяющую ML- и продуктовой командам находить точки роста и извлекать инсайты из данных, работать в тесной связке с юристами-экспертами, напрямую влиять на улучшение качества модели
- Разработка инструментов для разметки данных: выстроить полный цикл разметки и подготовки обучающих и валидационных датасетов, организовать контроль качества, обеспечить надёжность и согласованность разметки
- Сравнительный анализ качества внутренних конфигураций продукта и внешних моделей: создать инструменты для статистически корректного сравнения и бенчмаркинга решений на основе экспертной разметки и автоматических методов оценки качества, чтобы команда могла принимать обоснованные решения о развитии продукта
Требования
- Уверенное владение SQL и Python
- Знание математической статистики и теории вероятностей
- Структурное мышление и умение формулировать выводы на основе данных
- Понимание основ A/B-тестирования и оценки изменений в продукте
- Знание основ ML