Salesforce Inc BigTechОпубликована 4 дня назад · отклик: monster.com
AI/ML-инженер, RAG и агентные системы
ЗарплатаПо договорённости
ФорматНе указан
ЛокацияЛюбая
Salesforce ищет Lead-инженера в команду AI Core. Команда строит retrieval-системы и инфраструктуру для AI-агентов, а также инструменты разработчика для быстрого и безопасного запуска production-агентов.
Задачи
- Вести retrieval-инициативы от начала до конца: проектировать, строить и эксплуатировать retrieval-системы на базе RAG и гибридного поиска (лексический и векторный поиск, reranking, фильтрация), чтобы агенты отвечали на основе нужного контента с правильным объёмом контекста.
- Отвечать за поставку от скоупа и дизайна до запуска, мониторинга и итераций.
- Строить инструменты разработчика для production-агентов: технический дизайн фреймворков и платформенных компонентов, включая мультиагентную оркестрацию, общие примитивы для промптов, инструментов, трассировки и оценки.
- Отвечать за качество ответов: диагностировать, почему ответы неполные, неверные или неконсистентные, разделяя проблемы retrieval и проблемы генерации (промпт, бюджет токенов, выбор модели). Задавать планку качества и вести работу к её достижению.
- Проектировать модели контента и данных: определять, как контент из документов, баз знаний и транскриптов звонков загружается, сегментируется, размечается и извлекается, включая примитивы для свежести, дедупликации, приоритета источников и видимости internal/external.
- Делать изменения AI безопасными для релиза: строить практики оценки, наблюдаемости и раскатки (offline evals, online monitoring, обнаружение регрессий), чтобы уверенно менять промпты, модели и retrieval.
- Оценивать несколько путей решения и понимать, когда доверять выводу модели и агента, перенаправлять или переопределять его.
- Задавать бенчмарки производительности и масштабирования для платформы: определять и отслеживать цели по retrieval и индексации, использованию LLM-провайдеров и оркестрации агентов.
- Отвечать за операционное здоровье систем команды: надёжность и производительность, участие в on-call, руководство разрешением инцидентов в своей зоне и чёткая коммуникация с командой и стейкхолдерами.
- Использовать агентную разработку для повышения эффективности: применять кодинг-агентов по умолчанию для реализации, тестирования, рефакторинга и документации при высокой планке валидации. Создавать переиспользуемые workflow и паттерны.
Требования
- Опыт технического лидерства: способность превращать неоднозначные AI-задачи высокого значения в долговечные качественные системы и поднимать техническую планку команды.
- Опыт проектирования и эксплуатации retrieval-систем с RAG и гибридным поиском (лексический и векторный поиск, reranking, фильтрация).
- Понимание оркестрации агентов, промптов, инструментов, трассировки и оценки.
- Умение диагностировать проблемы качества ответов, разделяя retrieval и генерацию.
- Опыт проектирования моделей контента и данных, включая свежесть, дедупликацию и приоритет источников.
- Опыт построения практик оценки, наблюдаемости и раскатки AI-изменений.
- Опыт задания бенчмарков производительности и масштабирования.
- Готовность участвовать в on-call и руководить разрешением инцидентов.
- Использование кодинг-агентов в разработке при высокой планке валидации.
Условия
- Удалённая работа.
- Полная занятость.
- Компания: Salesforce Inc.
- После приобретения Salesforce команда сохраняет темп и ответственность стартапа при поддержке глобальной корпорации.
Инструменты в вакансии
Навыки и технологии
Направления