Ищем разработчика уровня Senior в команду, работающую над построением хранилища данных (DWH) и системы подготовки отчетности на базе технологий Hadoop, PostgreSQL.
Создаваемые решения — ключевые элементы архитектуры организации, обеспечивающие задачу по централизации функции формирования обязательной отчетности Сбера (отчетность ЦБ).
Создание DWH и системы репортинга — амбициозная задача особенно с учетом объема ежедневных операций и генерируемых в Банке данных.
Участие в проекте — возможность получить уникальный опыт проектирования и разработки подобных решений на рынке РФ.
Обязанности
• проектирование и построение витрин и прототипов отчетов в хранилище данных: код на Java + Spark + Spring, БД — Hadoop и PostgreSQL.
• проектирование и разработка внутреннего Фреймворка команды по работе с данными.
• рефакторинг и ревью кода части оптимизации ETL-нагрузки.
• найм и обучение новых сотрудников
• оценка и подведение итогов работ подрядчика
Будет плюсом:
• опыт управления командой разработчиков
• понимание архитектур: распределенных и MPP систем
• понимание Hive, RDD, Dataset
• умение оптимизировать запросы в Hive и Spark
• понимание, как работает HDFS и формат файлов Parquet
• понимание работы оркестратора Oozie
• понимание архитектурного стиля взаимодействия компонентов распределённых приложений в сети — REST.
Тебе придётся работать с:
Java 8
Spring 5
Hibernate 5
Spark 3
PostgreSQL
Hadoop
Oozie
Jenkins
Bitbucket
Sonar
Требования
• опыт коммерческой разработки Java от 3-х лет
• опыт коммерческой разработки используя технологии Apache Spark/Hadoop от 1-го года
• отличное владение SQL
• навык работы с Maven, Git, Jira, Jenkins, Bitbucket
• базовое владение unix-shell
Условия
- множество интересных и сложных задач
- команда профессионалов, которая всегда поможет адаптироваться и поделится своей экспертизой
- корпоративный университет, Виртуальная школа Сбера, повышение квалификации, IT конференции, митапы, библиотека — обучение за счет компании
- график работы — гибрид (испытательный срок-офис)
- структура дохода — оклад и годовая премия
- ДМС с первого дня, программа для родственников, страхование от несчастных случаев и тяжелых заболеваний
- собственный спортзал
- материальная помощь и социальная поддержка, корпоративная пенсионная программа
- льготные условия кредитования и ипотеки
- подписка СберПрайм+ для сотрудников, скидки и бонусы от компаний партнёров, а также различные корпоративные активности.
- работа в офисе г. Москва, ул. Вавилова 19 (м.Ленинский проспект).
