Data Engineer

Дата размещения вакансии: 04.12.2024
Работодатель: Газпром проектирование
Уровень зарплаты:
з/п не указана
Город:
Санкт-Петербург
Новгородская улица 13
Требуемый опыт работы:
От 3 до 6 лет

Обязанности:

  • Участие в ИТ-проекте по созданию, внедрению и поддержке корпоративного хранилища данных.

  • Анализ структур систем-источников данных, а также выявлять возможности и способы интеграции.

  • Разработка коннекторов к системам-источникам данных ( TDMS, 1C:ERP, PM Controlling).

  • Импорт данных из разных источников в корпоративное хранилище.

  • Проверка собранных данных с последующей очисткой от недостоверной, ошибочной и повторяющейся информации.

  • Разработка структуры, архитектуры и других параметров хранилища собранных сведений.

  • Работа над оптимизацией систем хранения.

Требования:

  • Высшее образование в сфере ИТ.

  • Участие в проекте по разработке корпоративного хранилища данных компании в качестве Data Engineer.

  • Опыт работы в проектах по внедрению и развитию корпоративного хранилища данных - более 3 лет.

  • Опыт работы с популярными ETL-фреймфорками (Apache NiFi, Apache Kafka, Apache Airflow, Apache Hadoop).

  • Уверенное знание SQL, Python. Java будет плюсом.

  • Опыт разработки схемы данных, знание основных методологий построения хранилищ данных.

  • Опыт работы с отечественными BI системами (желательно – Visiology).

  • Знание ОС Linux.

Условия:

  • трудоустройство по ТК РФ (бессрочный трудовой договор);
  • полный соц пакет, ДМС;
  • возможность пройти обучение за счет компании;
  • наличие дополнительного премирования.