Senior data engineer/ DWH architect

Дата размещения вакансии: 20.09.2024
Работодатель: УК Деметра-Холдинг
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 3 до 6 лет

Мы «Деметра-Холдинг» – крупнейший в России вертикально интегрированный инфраструктурный холдинг, объединяющий активы в области экспортной логистики и трейдинга. Компания развивает собственную сеть элеваторов, владеет глубоководными морскими зерновыми терминалами и логистической инфраструктурой.

Сейчас мы укрепляем нашу команду и находимся в поиске "Senior data engineer/ DWH architect».

Задачи:

  • Проектирование целевой архитектуры платформы данных;
  • Разработка и внедрение компонентов платформы данных;
  • Организация загрузки данных из различных источников (внутренние БД, файловые хранилища, API, web-ресурсы);
  • Создание SQL витрин и процедур;
  • Формирование системы контроля и мониторинга целостности и качества данных;
  • Подготовка и поддержание в актуальном состоянии каталога метаданных;
  • Выстраивание процесса CI/CD совместно с DevOps;
  • Code review и наставничество команды DE.

Требования:

  • Высшее образование (техническое, математическое, экономическое);
  • Глубокое понимание принципов проектирования архитектуры хранилищ данных DWH (Data vault/Inmon/Kimball);
  • Опыт проектирование и разработки хранилищ данных от 5 лет. В роли Team lead от 1 года;
  • Опыт разработки и организации ETL на Python (Airflow, Nifi, Prefect) от 2 лет;
  • Уверенное знание SQL, опыт разработки сложных запросов и процедур в (MS SQL, Postgres - преимущество) от 5 лет;
  • Опыт выстраивания CI/CD (DataOps);
  • Опыт внедрения Kafka, RabbitMQ, dbt, Airflow, Greenplum/Clickhouse – сильное преимущество;
  • Linux;
  • Автономность, навыки самостоятельного поиска технических решений.

Условия:

Возможность реализовать ключевые проекты для компании.

  • Оформление строго по ТК РФ;
  • Конкурентоспособная з/п + годовой бонус;
  • Гибридный или удаленный график работы (зависит от места проживания);
  • ДМС, софинансирование питания.