от 250000 до 400000 RUR
Москва
От 3 до 6 лет
На данный момент мы ищем 1 middle/senior Data Engineer в «ДатаЛаб» на проект по построению DWH для «ВкусВилл».
Направление «ДатаЛаб» специализируется на Big Data, машинном и глубоком обучении и искусственном интеллекте с 2021 года. В составе направления более 30 специалистов. Гордимся тем, что создали для «ВкусВилл» предиктивную модель по прогнозированию сроков доставки, а также систему, которая рекомендует покупателям товары в мобильном приложении, что улучшает лояльность клиентов.
Что предстоит делать:
- Извлечение, преобразование, загрузка данных и их обработка, ETL/ELT (Python/Airflow);
- Формирование отчетов (Greenplum/Clickhouse);
- Создание и развитие процессов управления данными и их качеством;
- Оптимизация процессов поставки данных (Kafka/Spark/dbt);
- Работа с DWH.
Мы ждем от вас:
- Уверенный опыт программирования на Python (не менее 2-х лет);
- Уверенные знания SQL и опыт работы с базами данных;
- Опыт работы с Apache Airflow;
- Оптимизация SQL запросов;
- Опыт работы с GreenPlum/СlickHouse;
- Понимания концепций построения хранилищ данных (DWH);
- Опыт работы со Spark.
