Сбер. IT Опубликована 13 дней назад · отклик: Сайт вакансий
Middle/Senior ML-инженер по Vision и OCR
ЗарплатаПо договорённости
ФорматГибрид
ЛокацияМосква, Россия
ГрейдMiddle / Senior
ЗанятостьПолная занятость
В CV-команду Сбера ищут Middle/Senior инженера для разработки продукта автоматического распознавания документов. Команда занимается OCR-моделью на базе VLM, сбором обучающих данных с использованием кастомного agentic harness и развёртыванием клиентского сервиса внутри банка. Инженер будет вести полный цикл обучения и деплоя продукта.
Обязанности:
- изучать SOTA-подходы к OCR: чтение свежих статей по e2e OCR, адаптация подходов data mining, SFT/RL, гипотезы;
- ставить эксперименты по обучению VLM-моделей: проверка гипотез на multi-node сетапе, замер метрик на внешних и внутренних бенчмарках;
- дорабатывать пайплайн обучения: улучшение репозитория на текущем стеке (accelerate, TRL) — ускорение обучения, добавление аугментаций, адаптация под новые модели;
- собирать обучающие данные: агрегация существующих и новых данных в формате Markdown, поиск новых доменов, написание скриптов загрузки;
- размечать датасеты: запуск процесса разметки для новых или существующих данных с помощью кастомного agentic harness сборщика разметки (и его улучшение) или внутренней платформы разметки асессорами;
- адаптировать сервис: интеграция обученных моделей в сервис на основе vLLM для обслуживания клиентов внутри банка.
Требования:
- высшее образование по математике, информатике или профильному data science;
- 3+ лет в ML, из них не менее года с LLM/VLM в проде;
- английский для чтения статей и документации;
- fine-tuning: SFT, LoRA/QLoRA, RL (DPO, GRPO);
- современные движки инференса: vLLM, sgLang, triton;
- опыт работы с VLM: понимание принципов работы, дообучения, основных ограничений;
- агентные пайплайны: вызовы моделей, обработка исключений, ограничение стоимости;
- опыт разметки датасетов асессорами или автоматическими инструментами;
- Python: код, который уходит в прод, тесты, ревью, код-стайл;
- специфика банка: много контрагентов, с ними нужно иногда коммуницировать.
Будет плюсом:
- опыт python-бэкендера: FastAPI, асинхронность, очереди, PostgreSQL, векторные хранилища;
- работа с разметчиками и контрагентами;
- публикации, доклады, open source.
Условия:
- комфортный современный офис — м. Кутузовская;
- гибридный формат работы;
- ежегодный пересмотр зарплаты, годовой бонус;
- корпоративный спортзал и зоны отдыха;
- более 400 образовательных программ СберУниверситета для профессионального и карьерного развития;
- расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа;
- гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ;
- подписка Прайм с возможностью совместного использования на трёх близких;
- вознаграждение за рекомендацию друзей в команду Сбера;
- корпоративная пенсионная программа.
Инструменты в вакансии
Навыки и технологии
Направления