ETL-разработчик (Data Engineer) Москва

Дата размещения вакансии: 05.11.2024
Работодатель: СберСпасибо
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 3 до 6 лет

СберСпасибо – самая большая банковская программа лояльности в России. Участники копят бонусы за покупки по карте и обменивают их на скидки у партнеров.

70 миллионов участников программы

10 000 транзакций в секунду

> 1000 региональных и федеральных партнеров

Сегодня наша команда развивает единую программу лояльности экосистемы Сбера.

Это крутой проект и у тебя есть возможность принять в нем участие!

Стек: PostgreSQL, Greenplum, DBT, Minio, ClickHouse, SQL, Python, Kafka, Rest API

Чем предстоит заниматься:

  • Настроить пайплайн автоматической проверки качества данных;
  • Написать скрипты для загрузки новых источников;
  • Создать витрины для команды розницы и product analysis;
  • Оптимизировать ежедневную загрузку хранилища;
  • Подружить процессы выгрузок данных из DWH с Kafka.

Что ждем от вас:

  • Крепкие знания SQL (оптимизация запросов, физические соединения таблиц);
  • Уверенные знания Python;
  • Опыт работы с промышленными ETL (DBT как преимущество, SAS DI, Informatica, ODI, DataStage);
  • Понимание принципов проектирования хранилищ данных;
  • Опыт работы с MPP (GP как преимущество)/ колоночными СУБД (Clickhouse как преимущество);
  • Опыт работы в Linux на уровне пользователя
  • Опыт работы разработчиком DWH от 2 лет.

Было бы здорово, если ты:

  • знаком с Git;
  • работал с Python 3.8.13;
  • имеешь представление (или практический опыт работы) об Airflow (у нас не используется);
  • слово Kafka для тебя не в новинку, либо ты не прочь разобраться что это такое.

Что мы предлагаем:

  • Стильный офис около м. Кутузовская;
  • Работа в аккредитованной IT компании;
  • Возможность работать как в офисе, так и из дома;
  • Льготная ипотека для сотрудников;
  • Корпоративный спорт;
  • Расширенный ДМС с первого дня работы (страхование жизни и здоровья, страховка выезжающего за границу, льготное страхование близких и т.д.);
  • Обучение в Корпоративном университете Сбера;
  • Скидки, бонусы и специальные предложения от экосистемы Сбера и партнёров.

Если нравится автоматизировать рутинные процессы, оптимизировать процесс загрузки данных в хранилище и обучаться новому — ждём в СберСпасибо!