Сбер. IT Опубликована 13 дней назад · отклик: Сайт вакансий
TechLead ETL-платформа Scala/Spark
ЗарплатаПо договорённости
ФорматОфис
ЛокацияМосква, Россия
ЗанятостьПолная занятость
Центр компетенций по работе с данными в банке строит платформу индустриализации ETL — Self-Service продукт, объединяющий Core на Scala/Spark, CI/CD и UI.
Обязанности
- Спроектировать ядро платформы: универсальный ETL-фреймворк на Scala/Spark с абстракцией бизнес-логики от инфраструктурного кода.
- Настроить промышленный CI/CD: автоматический деплой пайплайнов через Git (Dev → QA → Prod) с авто-тестированием, линтингом и подгрузкой секретов из Vault.
- Управлять технологическим стеком: принимать стратегические решения по выбору целевого стека, лидировать переход на него, внедрять AI.
- Возглавить команду инженеров: лидировать 3 стрима разработки (UI, CI/CD, Core ETL), выстроить стандарты Code Review.
Требования
- Высшее техническое образование.
- Опыт управления командой 8–12 инженеров (Data + DevOps + UI).
- Уверенное владение SQL, Scala, Java, Python, Groovy, Bash, JavaScript.
- Опыт работы с базами данных: Apache Spark, Apache Flink, Apache Iceberg, HDFS, YARN, Kubernetes, S3-совместимые хранилища, ClickHouse, PostgreSQL.
- Экспертный уровень Jenkins Pipeline as Code (Groovy) с организацией Shared Libraries, опыт настройки многостадийных пайплайнов.
- Опыт построения отказоустойчивых и высоконагруженных ETL-платформ, понимание микросервисной архитектуры.
- Базовое знание фреймворка React, проектирование асинхронных систем (опыт с Celery, Redis).
- Экспертиза в AI & Инновациях: LangChain/LlamaIndex, RAG, интеграция LLM для генерации кода и аномалийного детектирования, AI-подсказки в UI.
Условия
- Офисный формат в Москве (ул. Поклонная, 3к1).
- Ежегодный пересмотр зарплаты и годовая премия.
- Расширенный ДМС и льготное страхование для семьи.
- Система обучения для профессионального и карьерного развития.
- Выгодная ипотека для сотрудников.
- Подписка Прайм с возможностью совместного использования на трёх близких.
- Вознаграждение за рекомендацию друзей в команду.
- Корпоративная пенсионная программа.
Инструменты в вакансии
Навыки и технологии
Направления