Профсоюзная улица 125А
Разработка сервисного ядра хранилища. Реализация нового функционала для разработки витрины данных на GP.
ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ:
- Разрабатывать и развивать внутренний framework для построения корпоративного DWH;
- Проектировать и реализовывать универсальные механизмы загрузки и трансформации данных;
- Разрабатывать решения для автоматизации создания витрин и ETL-процессов;
- Оптимизировать производительность Greenplum и повышать эффективность работы платформы;
- Разрабатывать интеграции с внешними источниками данных (PXF и другие механизмы);
- Создавать и поддерживать DAG'и в Airflow;
- Разрабатывать сервисы и утилиты на Python;
- Участвовать в проектировании архитектуры платформы данных и определении технических стандартов;
- Проводить код-ревью и участвовать в принятии архитектурных решений.
МЫ ЖДЕМ ОТ ВАС:
- Отличное знание Greenplum и понимание его внутреннего устройства;
- Глубокие знания SQL и опыт оптимизации сложных запросов;
- Практический опыт работы с:
- PXF;
- партиционированием;
- распределением данных;
- MPP-архитектурой;
- анализом производительности и оптимизацией запросов.
- Уверенное владение Python;
- Опыт разработки и сопровождения пайплайнов в Apache Airflow;
- Понимание принципов построения корпоративных DWH и ETL/ELT-процессов;
- Опыт проектирования архитектурных решений и разработки внутренних платформ или библиотек.
Будет плюсом
- Опыт разработки собственных framework или платформенных решений;
- Знание PostgreSQL на уровне внутренних механизмов;
- Опыт работы с Git, CI/CD;
- Опыт работы с контейнеризацией (Docker/Kubernetes);
- Понимание принципов DataOps.
МЫ ПРЕДЛАГАЕМ:
- Обучение за счет компании (посещение конференций, курсов, помощь в написании статей на Хабр и т.д);
- Вертикальное и горизонтальное развитие: регулярные тренинги, вебинары, митапы;
- Забота о вашем здоровье: ДМС после испытательного срока, куда входит стоматология;
- Гибкий график;
- Комфортные и современные офисы;
- Дополнительные бонусы от Россельхозбанка для сотрудников группы компаний (скидки на спортзалы, рестораны, маркетплейсы и т.д.).