Senior Full Stack-разработчик, эксперименты и продуктовая аналитика
Grafana Labs развивает Grafana Cloud и строит нативную платформу для экспериментов — приложение Grafana, в котором команды задают A/B-тесты, связывают их с фича-флагами и продуктовой телеметрией и получают статистически обоснованные результаты. Сейчас приложение используется внутренними инженерными и продуктовыми командами Grafana, следующий этап — сделать его полноценным продуктом, в том числе для клиентов Grafana Cloud рядом с Frontend Observability, Session Replay и другими возможностями пользовательского опыта.
Роль в команде Product Analytics. Нужен инженер, который будет отвечать за разработку приложения для экспериментов и влиять на его развитие. Это практическая инженерная роль с выпуском продакшен-кода, не аналитическая.
Задачи
- Развивать приложение для экспериментов из внутреннего инструмента в продукт: полная ответственность за функции от постановки проблемы и проектирования до выката, измерения и итераций.
- Разрабатывать интерфейсы и сценарии для формулирования гипотез, настройки экспериментов и метрик, управления жизненным циклом экспериментов и изучения результатов; делать их полезными для продактов, аналитиков и инженеров.
- Упрощать внедрение и повышать доверие к инструментированию: развивать SDK для экспериментов и интеграции с OpenFeature и Faro, помогать командам связывать назначение вариантов, фактический показ и события результатов с согласованными идентификаторами и контрактами событий.
- Связывать эксперименты с остальным стеком пользовательского опыта Grafana: интегрировать с Grafana Faro и Frontend Observability, чтобы показы флагов и результаты фиксировались автоматически.
- Работать в тесной связке с учёными по данным по статистике, инженерами данных по потоку событий и хранилищу данных, инженерами Grafana по фича-флагам, Frontend Observability и App Platform, а также с продуктовыми стейкхолдерами.
Стек и продукт
- Приложение построено на Grafana App Platform.
- Frontend: TypeScript и React, плагин приложения на @grafana/ui, кастомный плагин источника данных для панелей статистики экспериментов.
- Backend: Go, Grafana App SDK.
- Эксперименты описаны как пользовательские ресурсы в стиле Kubernetes на CUE, с оператором, admission webhooks и поддержкой декларативного управления в стиле GitOps.
- Фича-флаги: интеграция с OpenFeature и OpenFeature Remote Evaluation Protocol (OFREP), мультитенантный сервис фича-флагов Grafana и встроенный вычислитель GO Feature Flag.
- Статистический движок: байесовский движок анализа на TypeScript с портом на Go; выдаёт вердикт по каждой метрике с учётом направления, вероятность быть лучшим, доверительные интервалы, ожидаемые потери и рекомендации по размеру выборки.
- Данные: события экспозиции и результатов идут из инструментирования продукта через RudderStack в BigQuery или из Grafana Faro в Loki и запрашиваются в реальном времени через источники данных Grafana.
- AI: помощь в создании экспериментов через Grafana Assistant — он находит релевантные данные и готовит черновик конфигурации эксперимента для проверки человеком.
Условия
- Полная занятость, удалённо.
- Рассматриваются кандидаты только из США и Канады, часовой пояс EST.
- Grafana Labs — полностью удалённая компания с сотрудниками в 40+ странах.