з/п не указана
Москва
От 3 до 6 лет
Требуется ИТ-лидер в команду, которая занимается разработкой и сопровождением витрин данных в банке. Команда 11 человек.
Витрины строятся на базе Arenadata Hadoop (Python, PySpark), источником витрин служат различные слои Озера данных. В дальнейшем витрины используются в Платформе исполнения моделей для принятия решения о выдаче кредитных предложений.
В зоне ответственности будет перечень работ, относящихся к построению, миграции витрин данных, их оптимизации и сопровождению.
Описание задач команды:
- Сбор, анализ, формализация требований
- Подготовка технической документации
- Оценка трудоемкости работ и планирование в рамках проектов ВТБ
- Исследование источников данных
- Составление и доработка маппингов
- Построение прототипов витрин согласно бизнес-требованиям заказчиков
- Проверка качества данных в прототипах
- Постановка задач разработчикам, аналитикам, тестировщикам в команде
- Участие в тестировании и приемке результатов
Обязанности:
- Управление командой, состоящей из аналитиков, разработчиков, тестировщиков
- Соблюдение требований и стандартов производственного процесса банка
- Взаимодействие с руководителями проектов и внутренними заказчиками
- Участие в архитектурных решениях, касающихся построения витрин данных
- Оценка трудозатрат и сроков, декомпозиция задач для команды (на спринт – 2 недели, на супер-спринт – 3 месяца).
- Контроль качества и сроков выполнения задач
- Участие в технической приемке разработанного функционала и взаимодействие с ИБ/внешними подразделениями
Требования:
- Опыт работы с хранилищами данных (DWH), витринами от одного года – факты, снежинки, звезды и т.д.
- Опыт управления командой от одного года
- Знание SQL и Python, плюсом будет опыт работы с Hadoop (Impala/Hive)
- Знания в области Big Data (Hadoop, Spark) и опыт работы с базами данных
- Опыт работы с технической документацией
- Опыт работы с выстраиванием качества данных
- Умение профилировать источники данных, выявлять закономерности
- Умение планировать и оценивать задачи команды
- Понимание гибких методологий разработки (Agile)
- Понимание принципов CI/CD, Gitflow, управления релизами
Желательно:
- Знание планировщиков процессов (AirFlow)
- Опыт разработки и/или внедрения витрин
- Понимание способов интеграций IT-систем
Стек: Python, PySpark, Hadoop, Apache Spark, AirFlow, Kafka
