Нахожусь в поиске Data Engineer в компанию, которая является одним из крупнейших ритейлеров России.
Команда, в которую ведется поиск, развивает корпоративное хранилище данных.
Проект предполагает как поддержку текущих решений, так и переход на новый стек технологий.
⚙️На какие задачи ищем:
-
Участие в миграции Хранилища данных на новые технологии, используя фреймворк компании;
-
Создание новых и развитие старых интеграций по загрузке сырых данных в DataLake;
-
Разработка pipline'ов доставки и обработки данных формирования витрин данных;
-
Написание и оптимизация сложных скриптов обработки данных.
-
Подготовка регламентов, инструкций и технической документации.
🔧Стек технологий: S3, Impala, Airflow, Spark, DBT, Python.
️ На что обращаем внимание:
-
Наличие опыта 3+ лет в Data Engineering;
-
Опыт написания SQL-кода от 2 лет;
-
Опыт создания ETL-процессов;
-
Понимание подходов моделирования данных: приоритет — Data Vault и 3НФ, желательно знание Anchor Modeling;
-
Знание Python на уровне написания скриптов будет большим плюсом.
С радостью предложим:
-
Трудоустройство по ТК РФ и полностью белую зарплату;
-
Возможность работы полностью удаленно или из офиса;
-
Гибкий график;
-
ДМС, корпоративную библиотеку и обучение;
-
Бонусы.