Санкт-Петербург
Мы команда развития банковского хранилища Блока Финансы, вместе мы занимаемся построением устойчивого надежного автоматизированного аналитического сервиса. Наша задача разработать решения по обработке и доставке данных, создать с нуля процессы загрузки потоков данных, сделать их эффективными и надежными.
Обязанности
- разработка слоев данных DWH
- реализация задач с использованием Hadoop и Apache Spark, ETL инструментов
- развитие архитектуры проекта и адаптация её под новые требования
- участие в выборе технологий, компонентов, архитектуры решений
- проведение code review других участников команды
- взаимодействие с аналитиками, разработчиками и DevOps инженерами.
- работа со стеком: Greenplum, Hadoop, Spark, ClickHouse, PostgreSQL, Java, Openshift, SuperSet, Jenkins, Nexus, Bitbucket, Kafka, Istio и др.
Требования
- опыт разработки на Apache Spark от 2-х лет
- знания SQL, опыт оптимизации запросов
- опыт разработки ETL процессов и решения задач по оптимизации производительности
- знакомство с инструментами экосистемы Hadoop: Hive, HDFS, Spark
- знания Java, Spring Boot, Maven, Hibernate
- опыт работы с реляционными БД
- проактивность в работе с внешними и внутренними контрагентами
Будет плюсом, если вы:
- работали с Greenplum
- изучали и внедряли DevOps практики.
Условия
- гибридный формат работы (возможность сочетать офис + удаленно)
- ежегодный пересмотр зарплаты и годовая премия
- более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- программа адаптации и помощь руководителя на старте
- ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- ипотека для сотрудников выгоднее до 7%
- бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
- вознаграждение за рекомендацию друзей в команду Сбера.