Требуется разработчик для участия в проектах, связанных с загрузкой новых источников, построением витрин данных для применения математических моделей на базе Hadoop (Impala) и прочих СУБД (Oracle, PostGre) средствами SAS DI.
Процессы проектов представляют сложную бизнес логику и архитектуру.
Работа в команде построена по методологии Agile.
Предстоит:
• Анализ требований на разработку и проектирование программного обеспечения (далее ПО) в соответствии с полученными требованиями.
• Проектирование потоков данных, интеграционных решений.
• Разработка процессов загрузки данных из систем источников, процессов архивной и инкрементальной загрузок, процессов трансформации данных и построения витрин данных.
• Участие в процессах сопровождения и внедрения ПО.
• Согласование спецификаций на разработку ПО, архитектуры, ТЗ, модели данных, в случае привлечения к разработке внешних ресурсов или других команд.
• Разработка средств запуска аналитических моделей.
• Разработка (или подключение и настройка) средств протоколирования действий пользователей и процессов (систем/компонент).
• Участие в приемо-сдаточных испытаниях.
Ожидаем следующие знания и умения:
• ETL/ELT инструменты и практики, разработка и развитие витрин данных, принципы построения и наполнения DWH.
• Репликация данных между DWH и источниками.
• SQL, Hadoop-стэк, работа с parquet (Hive / Impala / Spark).
• ETL-разработка: SAS DI / AirFlow + Python/ Dbt или др. энтерпрайз етл-решения.
• Принципы DevOps.
• Использование/внедрение CI/CD pipeline-ов для разработки, сборки/тестирования и доставки ETL доработок в production.
• Будет плюсом при наличии:
- Уверенное владение SAS DI или SAS языком программирования SAS Base, SAS Macro.
- Участие в написании кастомных ETL фреймворков / планировщиков.
- Написание ETL процессов по наполнению бизнес витрин в хранилище данных.
- Уверенный пользователь Linux / bash скриптование.
Предлагаем:
- По-настоящему живую и увлечённую команду, профессиональное развитие в команде одного из крупнейших Банков России;
- Официальное оформление по ТК РФ, достойный уровень вознаграждения;
- Корпоративное ДМС со стоматологией с первого месяца работы;
- Отпуск 33 дня + различные корпоративные программы;
- Возможность пользоваться Библиотекой и платформой с онлайн-курсами, участие в специализированных конференциях;
- Скидки от партнеров (ГПБ Бонус), сотовая связь для служебного использования;
- Активная корпоративная жизнь: устраиваем нескучные чтения, спортивные марафоны, квизы.
Возможна удаленная работа в пределах РФ
