Сбер. IT Опубликована 4 дня назад · отклик: Сайт вакансий
Senior ML-инженер: мультимодальные диффузионные модели
ЗарплатаПо договорённости
ФорматОфис
ЛокацияМосква, Россия
ГрейдSenior
ЗанятостьПолная занятость
Опыт работы: 3–6 лет. Занятость: полная. График: 5/2. Рабочие часы: 8. Формат работы: на месте работодателя.
Исследование и внедрение передовых методов для инструктивного редактирования изображений и видео, интеграции аудио в видео-генерацию и повышения качества за счёт RLHF (Reinforcement Learning from Human Feedback).
Обязанности
- Разработка и обучение диффузионных моделей для инструктивного редактирования видео и изображений.
- Исследование архитектур для совместной генерации видео и синхронизированного аудио по текстовому промпту.
- Создание пайплайна RLHF для тонкой настройки моделей: обучение мультимодальных reward-моделей (видео/аудио/текст); интеграция алгоритмов RL (PPO, DPO, GRPO, OPD) в диффузионный пайплайн.
- Проектирование экспериментов, анализ результатов.
- Тесная коллаборация с Distributed Engineers для эффективной имплементации идей.
Требования
- Сильный бэкграунд в CV, генеративных моделях (Diffusion, GANs), мультимодальном ML.
- Опыт работы с диффузионными моделями (Stable Diffusion/FLUX, Wan 2.X и пр.) и фреймворками (Diffusers).
- Практические знания Reinforcement Learning, особенно RLHF.
- Уверенное владение PyTorch и навыки распределённого обучения (DDP/FSDP).
- Способность быстро прототипировать и проводить исследования SOTA методов.
- Опыт работы с SGLang, vLLM, Transformers.
- Бонус: опыт с аудио-генерацией (AudioLDM, MusicGen), публикации на NeurIPS/ICML/CVPR.
Условия
- Комфортный современный офис рядом с м. Кутузовская.
- Ежегодный пересмотр зарплаты, годовая премия.
- Корпоративный спортзал и зоны отдыха.
- Система обучения для профессионального и карьерного развития.
- Расширенный полис ДМС с первого дня работы и страхование для семьи.
- Льготная программа ипотеки для сотрудников.
- Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнёров.
- Вознаграждение за рекомендацию друзей в команду Сбера.
Инструменты в вакансии
Навыки и технологии
Направления