Senior AI LLM Engineer
EverAI — AI-компания, развивающая платформу AI-компаньонов с 50 млн пользователей. Продукт модерируется собственной системой EverGuard.
Роль Большинство LLM-ролей останавливаются на экспериментах. Здесь модели, которые вы улучшаете, обеспечивают опыт для 50+ млн пользователей. Большая часть трафика работает на self-hosted, дообученных open-weight моделях. На внутренних roleplay-эвалах меньшие дообученные модели могут превосходить гораздо более крупные готовые модели. Ваша задача — сделать их лучше. Вы присоединитесь к небольшой AI-команде под руководством LLM Tech Lead, работая в тесной связке с CTO, Product, Web и DevOps командами. Вы будете работать с данными, post-training, эвалами и поведением модели, доводя идеи от анализа ошибок до продакшена. Задачи реальные: персонализация, консистентность персонажей, длинные диалоги, улучшение эвалов, мультиязычное поведение и ускорение циклов обучения. Если вы хотите влиять на поведение модели в потребительском масштабе — это ваша роль.
Ключевые обязанности
- Дообучать open-weight LLM с использованием SFT, LoRA/QLoRA и методов post-training, таких как DPO и GRPO
- Диагностировать сбои модели и превращать их в эксперименты. Решать, что поможет: лучшие данные, post-training, промптинг или классификаторы
- Создавать обучающие данные и эвалы, которые напрямую определяют, что будет обучаться дальше
- Улучшать поведение модели в персонализации, консистентности, тоне, мультиязычности и групповых взаимодействиях
- Доводить до продакшена и использовать реальное поведение пользователей для следующей итерации
- Ускорять цикл обучения, чтобы эксперименты были быстрее, проще сравнивались и были более воспроизводимыми
Квалификация
- Вы лично занимались post-training open-weight LLM для пользовательского продукта и доводили их до продакшена
- Вы работали там, где AI был ядром продукта или бизнеса, а не экспериментальной побочной функцией
- Дообучение — ключевая часть вашего опыта
- Сильные Python, PyTorch и Hugging Face, с практическим опытом обучения и отладки на GPU
- Вы сами создаёте данные и эвалы и принимаете решения на основе доказательств
- Вы умеете выводить работу за пределы ноутбуков в продакшен
- Вы ежедневно используете AI-инструменты в собственной инженерной работе
- Вы полностью комфортно работаете с нецензурированными моделями и явным NSFW-контентом, включая вредоносный материал при разработке и оценке системы модерации
Бонусные пункты
- Опыт с разговорным AI, roleplay-продуктами или высоко персонализированным потребительским AI
- Мультиязычные LLM
- Модерация, безопасность или состязательное тестирование
- Мультимодальные модели
- Вклад в open-source LLM / post-training
Условия
- Тип контракта: предпочтительно B2B, но возможна гибкость; важно долгосрочное сотрудничество и результат
- Работа откуда угодно: полностью удалённо. Выбирайте среду, где работаете лучше всего
- Оплачиваемый отпуск (текст обрывается)