Промт-инженер (поведение и оценка моделей)

Примечание: работа удалённая, открыта для кандидатов из США.

Yuna.io занимается трансформацией поддержки ментального здоровья с помощью эмпатичного разговорного ИИ. Промт-инженер будет отвечать за определение и оценку поведения ИИ в диалогах, обеспечивая качество и согласованность в мультиагентных системах, а также взаимодействовать с клиницистами и продуктовыми командами.

Обязанности

• Отвечать за поведение диалоговой системы в мультиагентной, мультимодельной среде.
• Совместно с клиницистами проектировать и эксплуатировать системы оценки качества диалогов: эмпатии, полезности, согласованности.
• Диагностировать сбои, анализируя реальные трассы диалогов, маршрутизацию агентов, использование памяти и системный контекст.
• Использовать продуктовые данные и качественные ревью для приоритизации улучшений.
• Оценивать и выбирать модели у провайдеров (например, Claude, AI) по критериям задачи, стоимости, задержки и качества выходных данных.

Требования

• Подтверждённый опыт управления поведением модели или агента в продакшене.
• Практический опыт проектирования и эксплуатации систем оценки (качественных и количественных).
• Умение определять, что значит «хорошо», и защищать это с помощью данных, а не ощущений.
• Уверенная работа с инструментами вроде LangGraph, LangSmith или аналогичными системами трассировки и оценки.
• Высокая грамотность в работе с данными: умение анализировать логи, трассы, метрики и аналитику для поиска первопричин.
• Понятная коммуникация и умение работать с продуктовыми, клиническими и инженерными командами в условиях неопределённости.
• Рабочее знание Python: умение читать, отлаживать и участвовать в разработке логики агентов и кода оценки.
• Знакомство с концепциями согласования (например, человеческие ценности, компромиссы безопасности, поведение отказа).
• Владение SQL и Excel.
• Образование в области психологии, лингвистики, нейронаук, педагогики или смежных областей.

Условия

• Конкурентная зарплата (зависит от опыта) + опционы на акции.
• Культура удалённой работы с гибкостью.
• Быстрорастущая, талантливая и эмпатичная команда, занимающаяся трансформацией ментального здоровья.
• Возможность использовать ИИ во благо.
• Уровень ответственности, позволяющий влиять на результат и создавать передовые ИИ-системы, улучшающие жизнь людей каждый день.

О компании

Миссия Yuna — радикально изменить способ доступа к поддержке ментального здоровья и её предоставления. Штаб-квартира в Сан-Франциско, Калифорния, США. Штат сотрудников: 11–50 человек.