Microsoft AI Experiences ищет Senior Language Engineer в команду Copilot. Роль предполагает ответственность за то, как Copilot использует язык: совместно с дата-сайентистами, исследователями ИИ, инженерами, дизайнерами и продакт-менеджерами выявлять проблемы, определять политику, оценивать язык, собирать данные и улучшать большие языковые модели, лежащие в основе Copilot. Уровень позиции — Applied Sciences IC4.
Задачи
- Создавать и уточнять контекст и промпты для управления, обучения и оценки языковых моделей Microsoft Copilot для эмоциональных и интеллектуальных сценариев.
- Создавать оценки и разрабатывать фреймворки для измерения как технической и практической производительности, так и недетерминированной производительности, например EQ.
- Исследовать и внедрять новые техники промптинга.
- Использовать data flywheel для извлечения инсайтов из обширных языковых датасетов, выявлять проблемы и возможности для улучшения качества ответов модели.
- Отвечать за статус ключевых проектов, проактивно выявлять риски и предлагать решения для своевременной сдачи.
Требования
Обязательные:
- Степень бакалавра в области статистики, эконометрики, компьютерных наук, электротехники или компьютерной инженерии (или смежной области) и 4+ года релевантного опыта (например, статистика, прогнозная аналитика, исследования) ИЛИ степень магистра и 3+ года опыта ИЛИ докторская степень и 1+ год опыта ИЛИ эквивалентный опыт.
Желательные:
- Степень магистра и 6+ лет опыта ИЛИ докторская степень и 3+ года опыта ИЛИ эквивалентный опыт.
- 3+ года работы в быстро меняющейся среде, управления несколькими приоритетами и адаптации к меняющимся требованиям и дедлайнам.
- Практический опыт в дизайне промптов, управлении контекстным окном и оценке моделей.
- 2+ года опыта выпуска потребительских продуктов: вывод на рынок, сбор обратной связи, определение метрик успеха и итеративное улучшение.
- 1+ год опыта создания LLM-приложений, знакомство с агентными и оркестрационными фреймворками, использованием инструментов, оценкой LLM и повышением эффективности.
- Техническая глубина в разработке ПО, дата-сайенс и машинном обучении. Не ожидается написание кода на критическом пути, но необходимо уметь навигировать и вносить вклад в репозитории кода для реализации улучшений контекстной инженерии и написания LLM-скорингов и классификаторов для оценки качества ответов модели.
Условия
- С 26 января 2026 года сотрудники Microsoft AI Experiences, проживающие в пределах 50 миль от назначенного офиса Microsoft в США или 25 миль от неамериканского офиса, обязаны работать из офиса не менее четырёх дней в неделю. Ожидание может зависеть от местного законодательства и различаться в зависимости от юрисдикции.