Data Engineering / Инженер данных информационных бизнес-систем

Обязанности:

• Сбор информации по текущим ELT/ETL процессам

• Проектирование и разработка ELT/ETL процессов

• Оптимизация производительности процессов обработки и обменов данными

• Анализ интеграционных потоков данных, поиск и устранение ошибок

• Сбор требований с бизнес-пользователей к разработке моделей данных и отчетов

• Создание моделей данных для отчетов в SQL (табулярные и многомерные модели данных)

• Обеспечение соответствия данных поставленным требованиям

• Документирование разработок, изменений в текущих процедурах и процессах (будь то интеграции, модели данных или отчеты)

• Работа с бизнес-пользователями, аналитиками и поставщиками в рамках поддержки и разработки BI решений

• Участие в разработке архитектуры данных организации

• Самостоятельное изучение новых технологий и инструментов в области инженерии данных

Требования:

• Высшее образование;

• Знание английского языка (уровень не ниже Intermediate);

• Опыт работы в подобной должности от двух лет;

• Глубокое понимание принципов проектирования и разработки конвеера данных

• Опыт построения витрин данных на SQL от 2х лет

• Опыт построения OLAP кубов (SSAS)

• Опыт работы с SSIS (создание ETL)

• Опыт проектирования, создания и поддержки интеграций в Apache Airflow

• Знание принципов работы обмена данными через API и опыт реализации таких обменов

• Обязательное знание и применение Python в решении интеграционных задачи и задач по обработке данных (библиотеки: Pandas, Matplotlib)

• Умение работать с Каталогами данных, составлять техническую документацию

• Опыт построения отчетов на платформах: «Power BI», «Tableau», «Qlick view/sense» от 2х лет как преимущество