Data Engineer (Прайсинг)

Прайсинг - новая платформа ценообразования в рамках RWB.

Вам предстоит:

• Проводить интеграцию потоков данных в единый контур хранения (Data Lake);
• строить аналитических витрин;
• заниматься построением витрин признаков (генерация фичей) под задачи аналитики;
• контролировать качество и аномалии во входных потоках.

Вы нам подходите, если:

• Имеете опыт работы с Data lake-ами (на базе S3 и/или HDFS);
• владеете опытом работы с аналитическими СУБД - Clickhouse
• работали с движками распределенных вычислений (Spark, Trino);
• имеете опыт работы с оркестраторами данных (Airflow);
• владеете опытом разработки на Python;
• имеете опыты работы с SQL.