Metadata Engineer

Чем предстоит заниматься:

• разрабатывать процессы сбора меты для datalake и систематизировать эти данные;
• развивать имеющийся процесс сбора меты для datalake при помощи написания и корректировки ETL (pyspark) процессов и сервисов на python;
• визуализировать мету с помощью каталога данных и системы отчетов;
• участвовать в разработке базы знаний команды.

Mы ожидаем от Вас:

• Опыт работы с Python от 1 года и более;
• Опыт работы с Airflow, Luigi, Argo или похожим инструментом;
• Умение получать и загружать данные из разных форматов, в том числе с помощью REST API;
• Знание SQL (DDL, DML, оконные функции);
• Готовность разбираться с незнакомыми инструментами/системами;
• Желание развиваться в сфере BigData.

Будет плюсом:

• Знание стека Hadoop (Hive, Spark и т.д.);
• Опыт использования системы отчетов для подготовки отчетов(Superset, Tableau и т.д.)

Мы предлагаем:

• Достойную твоего профессионального уровня зарплату
• Гибкий график работы, есть возможность удобно планировать рабочее и личное время, а также работать удаленно
• Расширенную ДМС программу со стоматологией
• Интересные задачи на большом проекте с продвинутыми технологиями и многомиллионной аудиторией
• Поучаствовать в развитии одного из самых узнаваемых брендов
• Возможность работать удаленно.