з/п не указана
Москва
От 3 до 6 лет
Команда CDO B2C в поиске Data engineer в сфере управления данными и data-продуктами.
Наша команда отвечает за управление всеми данными B2C сегмента клиентов Сбера. Мы уже трансформировали подход к управлению данными, построили единый слой детальных данных и продолжаем развивать его актуальность и полноту. Так же перед нами стоят амбициозные задачи построения единого слоя агрегатов и фичей B2C, реализация всего тракта поставки данных в RealTime и внедрения нового стека технологий, что позволит создать единую точку правды для упр. отчетности, моделей и фронтальных систем, а так же капитализировать данные за счет их многократного переиспользования.
Обязанности
- разрабатывать DWH/DataLake/LakeHouse
- организовывать поставки данных в RealTime/NRT/Batch
- проводить код-ревью других разработчиков
- оптимизировать ETL
- внедрять новые технологии/новые стеки в существующие решения
- повышать актуальность данных
- снижать latency доступа к данным
- разрабатывать и валидировать архитектуру данных
Требования
- наличие высшего технического образования
- знание SQL (join, CTE, оконные функции, фреймы и др.)
- опыт работы с Hadoop, Spark, Iceberg/Paimon, S3
- опыт работы с Kafka и другими брокерами
- опыт работы с оркестраторами (например, Airflow) и CI/CD
- навыки построения архитектуры данных (например, Data Vault, Инман, Кимбалл и др.) и кратной оптимизации ETL
- практическое знание python на уровне разработки ETL
будет преимуществом
- практическое знание java/scala
- опыт создания и защиты архитектуры данных
- опыт разработки solution-архитектуры data-продуктов
Условия
- офисный формат работы
- годовой бонус и ежегодный пересмотр
- расширенный ДМС с первого дня + стоматология и льготное страхование для семьи
- корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
- офис на Кутузовской с зонами отдыха и спортзалом
- льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров.
