Предстоит:
• Разработка фреймворка ETL оркестрации.
• Разработка DevOps процессов (пайплайнов).
• Разработка процессов загрузки данных из систем источников, процессов архивной и инкрементальной загрузок, процессов трансформации данных и построения витрин данных.
• Проектирование потоков данных, интеграционных решений.
• Анализ требований на разработку и проектирование ПО.
• Участие в процессах сопровождения и внедрения ПО.
• Согласование спецификаций на разработку ПО, архитектуры, ТЗ, модели данных, в случае привлечения к разработке внешних ресурсов или других команд.
• Участие в приемо-сдаточных испытаниях.
• Сопровождение внедрённых решений.
Ожидаем:
• Опыт работы в роли Python разработчика от двух лет.
• Опыт работы с Airflow.
• Опыт проектирования и разработки ПО, знание принципов ООП.
• Опыт работы с ETL/ELT инструментами и практиками, разработки и развития витрин данных, принципов построения и наполнения DWH.
• Опыт оркестрации ELT пайплайнов в Airflow в кластерных решениях (развёрнутый на CeleryExecutor, KubernetesExecutor конфигурациях).
• Опыт репликации данных между DWH и источниками.
• Опыт построения DevOps пайплайнов (Git, TeamCity, BitBucket, Nexus, Docker или аналогичном стеке). Сборка, тестирование, доставка на целевые среды.
• Уверенный пользователь Linux / bash скриптование.
Будет плюсом знание: dbt, Impala, greenplum, spark, Hadoop стек.
Предлагаем:
• Созидательная среда и интересные проекты
• Работа в команде профессионалов. Неравнодушных, активных, ответственных за свой результат.
• Конкурентная заработная плата и система премирования.Привлекательный социальный пакет:
- медицинская страховка с первого месяца работы
- отпуск 33 календарных дня
- материальная помощь и дополнительные выплаты
- дисконтные и корпоративные программы компаний-партнеров
• Обширные возможности для всестороннего развития и расширения кругозора сотрудников:
- программы по развитию профессиональных знаний, личных качеств, управленческих компетенций
- ГПБИнтеллекторий, КВИЗы, Спартакиада, программы Трансформации Духа, разума и силы – лайфхаки от гуру в различных областях
- знакомство и обмен опытом с коллегами из других подразделений и других городов
- танцы, занятия по вокалу, актерскому мастерству – это только малая часть айсберга корпоративно-культурной жизни, предлагаемой сотрудникам.
• Комфортные условия работы.
Возможна "удаленка" в пределах РФ
