Senior Certification Architect, AI-сертификации
ЗарплатаПо договорённости
ФорматГибрид
ЛокацияSan Francisco, США
ГрейдSenior
OpenAI ищет сертификационного архитектора в команду Customer Education (направление Certification). Роль предполагает определение рамок, стандартов и архитектуры оценки, чтобы сертификации OpenAI были надёжным сигналом подтверждённых навыков.
Это senior hands-on роль: нужно создавать переиспользуемые основы для растущего портфеля сертификаций — понятные стандарты компетенций, обоснованные оценки, масштабируемую доставку внутри продукта и подтверждение поддержания компетенций.
Задачи:
- Владеть рамкой сертификаций и общими стандартами компетенций, различая завершённое обучение, продемонстрированные навыки и формальную сертификацию, с ясными заявлениями о возможностях и требованиями к доказательствам.
- Устанавливать переиспользуемые стандарты оценки и руководства для сертификационных команд: анализ рабочих задач, модели компетенций, схемы оценки, практические задания, рубрики оценивания и проходные баллы.
- Владеть подходом к валидации и требованиями к документации доказательств; совместно с лидерами команд проверять предложения по сертификации на соответствие работе, репрезентативность задач, согласованность оценивания, справедливость и корректную интерпретацию результатов.
- Определять архитектуру и требования к проведению экзаменов совместно с продуктом, инженерией, операциями и третьими сторонами: регистрация, верификация личности, мониторинг, разрешённая помощь, фиксация доказательств, оценивание, человеческая проверка, апелляции, поддержка клиентов и управление записями.
- Определять ожидания по подтверждению компетенций после оценки.
- Работать с командами обучения, операций, политик, юридической, приватности, безопасности и доступности, чтобы согласовать подготовку с компетенциями, защитить целостность оценки и установить процессы доступа к доказательствам, их хранения, accommodations и проверки.
Требования:
- 10+ лет опыта проектирования и проведения профессиональных технических IT-сертификаций или оценок, подтверждающих достоверные заявления о навыках.
- Опыт руководства разработкой практических оценок для ролей в AI, разработке ПО, технической архитектуре или клиентской реализации.
- Опыт создания рамок сертификаций, моделей компетенций или общих стандартов оценки для нескольких ролей или программ.
- Опыт руководства анализом рабочих задач, схемами оценки, практическими оценками, дизайном рубрик, установлением стандартов и сбором доказательств для валидных и справедливых решений о сертификации.
- Умение переводить требования к опыту оценки в спецификации проведения экзаменов для третьих сторон и продуктовых команд обучения.
- Опыт тесной работы со специалистами по сертификации, психометриками и экспертами предметной области для валидации стандартов оценки и повышения качества.
- Умение ясно доносить сложные стандарты техническим и нетехническим партнёрам и выстраивать согласованность без формальных полномочий.
- Готовность к практической работе: от drafting стандартов и проверки дизайна оценок до решения практических компромиссов по доставке в небольшой команде.
- Здравомыслие в неоднозначных условиях с балансом строгости, опыта кандидата, выполнимости доставки и темпа изменений технологий.
- Внимание к доступности, справедливости и целостности сертификаций, на которые полагаются люди и работодатели.
- Умение строить переиспользуемые подходы, понимая, где разным ролям нужны отдельные модели компетенций, задачи и доказательства.
Дополнительно полезно:
- Валидация AI-ассистированного оценивания, оценки моделей или других автоматизированных подходов к оценке человеческой работы.
- Работа с безопасной доставкой оценок, верификацией личности, выдачей сертификаций, записями обучающихся или провайдерами технологий оценки.
- Разработка инновационных подходов к ресертификации, поддержанию компетенций или оценке реальной работы.
- Создание продуктов для индивидуальных пользователей и организаций.
Условия:
- Роль базируется в Сан-Франциско, Калифорния.
- Гибридная модель: 3 дня в офисе в неделю.
- Новым сотрудникам предлагается помощь с релокацией.
Инструменты в вакансии
Навыки и технологии
Направления