Data Quality Engineer

Обязанности:

• Мониторинг качества Feature Store - настройка проверок на платформе Evidently, сверка логики сбора фичей с продовым скорингом, выявление деградации и расхождений;
• Поддержка и развитие существующих проверок качества данных;
• Внедрение автоматических проверок на этапах загрузки (Soda Core);
• Настройка дашбордов в Grafana;
• Синхронизация наполнения OpenMetaData;
• Аудит пользовательских витрин: анализ использования, выявление неиспользуемых и ресурсоёмких объектов;
• Взаимодействие с аналитиками BI для корректного построения источников данных.

Требования:

• Стек технологий :
  Python, SQL, Apache Airflow, Soda Core, Grafana, OpenMetaData, Git, Trino, Apache Iceberg, Evidently
• Опыт коммерческой разработки на Python от 1 года (именно для data-инженерии);
• Продвинутый SQL (оконные функции, CTE, объединения, подзапросы);
• Опыт написания DAG в Apache Airflow;
• Практический опыт внедрения проверок качества данных (Soda Core или аналоги);
• Понимание принципов Data Quality: уникальность, полнота, свежесть, согласованность, распределение;
• Знание принципов настройки мониторинга данных (Grafana);
• Знание каталогов метаданных (OpenMetaData или аналоги);
• Готовность взаимодействовать с BI-разработчиками (Qlik, Power BI).

Условия:

• Официальное трудоустройство и стабильная заработная плата;
• Удаленный формат работы;
• Возможности профессионального и карьерного роста внутри банка;
• ДМС после испытательного срока.