ETL-разработчик (Data Engineer), Москва

Дата размещения вакансии: 20.01.2025
Работодатель: СберСпасибо
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 3 до 6 лет

СберСпасибо – самая большая банковская программа лояльности в России. Участники копят бонусы за покупки по карте и обменивают их на скидки у партнеров.

70 миллионов участников программы

10 000 транзакций в секунду

> 1000 региональных и федеральных партнеров

Сегодня наша команда развивает единую программу лояльности экосистемы Сбера.

Это крутой проект и у тебя есть возможность принять в нем участие!

Стек: PostgreSQL, Greenplum, DBT, Minio, ClickHouse, SQL, Python, Kafka, Rest API

Чем предстоит заниматься:

  • Проектировать, разрабатывать, тестировать ETL процессы на основе DBT + Python;
  • Мониторить и оптимизировать процессы обработки данных;
  • Поддерживать и разрабатывать потоки данных с использованием Kafka;
  • Развивать Data Quality движок;
  • Разрабатывать, поддерживать и оптимизировать инфраструктуру внутренних сервисов;
  • Участвовать в проектировании архитектуры DWH и поддерживать существующие решения;
  • Разрабатывать решения и инструменты для автоматизации процессов;
  • Локализировать и устранять инциденты;
  • Прорабатывать и настраивать CI/CD пайплайны;
  • Активно участвовать в проведении code review.

Что ждем от вас:

  • Крепкие знания SQL (оптимизация запросов, физические соединения таблиц);
  • Уверенные знания Python;
  • Опыт работы с промышленными ETL (DBT как преимущество, SAS DI, Informatica, ODI, DataStage);
  • Понимание принципов проектирования хранилищ данных;
  • Опыт работы с MPP (GP как преимущество)/ колоночными СУБД (Clickhouse как преимущество);
  • Опыт работы в Linux на уровне пользователя
  • Опыт работы разработчиком DWH от 3 лет.

Было бы здорово, если ты:

  • знаком с Git;
  • работал с Python 3.8.13;
  • имеешь представление (или практический опыт работы) об Airflow (у нас не используется);
  • слово Kafka для тебя не в новинку, либо ты не прочь разобраться что это такое.

Что мы предлагаем:

  • Стильный офис около м. Кутузовская;
  • Работа в аккредитованной IT компании;
  • Возможность работать как в офисе, так и из дома;
  • Льготная ипотека для сотрудников;
  • Корпоративный спорт;
  • Расширенный ДМС с первого дня работы (страхование жизни и здоровья, страховка выезжающего за границу, льготное страхование близких и т.д.);
  • Обучение в Корпоративном университете Сбера;
  • Скидки, бонусы и специальные предложения от экосистемы Сбера и партнёров.

Если нравится автоматизировать рутинные процессы, оптимизировать процесс загрузки данных в хранилище и обучаться новому — ждём в СберСпасибо!