Эксперт Clickhouse / MPP

Дата размещения вакансии: 24.09.2024
Работодатель: СБЕР
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
Более 6 лет

О проекте:

1. Мы создаем аналитическую платформу, чтобы управлять эффективностью организации (Enterprise Performance Management): формировать стратегию и ставить цели, планировать, прогнозировать и контролировать исполнение планов, а также рассчитывать премии сотрудников

2. У нас две ключевые задачи: (1) провести глубокий реинжиниринг текущих процессов и (2) создать it-решение их обеспечивающее, заменив текущие вендорские it-решения на собственную технологическую платформу

3. Проект рассчитан как минимум на 2024-2028 годы

4. Команда 300+ человек

5. В этом году началась активная часть проекта. Ключевые направления 2024:

a. Создание бизнес-архитектуры: реинжиниринг бизнес-процессов, подготовка бизнес-требования, проектирование модели данных

b. Разработка ядра платформы

c. Начало реализации ряда прикладных сервисов

Что нужно знать о ядре платформы:

  • Аналитический профиль нагрузки, а значит, обработка миллиардов записей для получения результата будет обычным делом
  • Максимальная гибкость и self-service для построения высокой вариативности прикладных сервисов. Делаем такие low/no-code инструменты, как конструктор расчетов и конструктор ad-hoc отчетов
  • Сloud-native для быстрого деплоя в облако и on-premise у различных клиентов
  • Масштабы Сбера – в платформе 10.000+ пользователей, сотни сервисов, десятки терабайт исходных данных из 100+ разнородных источников.

Тех.стек: Java, Python, JavaScript, ClickHouse, Greenplum, PosgreSQL, Spark, SuperSet, AirFlow и другие

Задачи:

  • проектирование, сайзинг, внедрение, поддержка доступности и производительности СУБД в рамках архитектурных стандартов и кибербезопасности
  • развертывание и настройка СУБД: PG|GP|Clickhouse
  • настройка Linux под СУБД
  • изучение новых решений, помощь в составлении рекомендаций
  • решение сложных системных проблем (уровень СУБД/OS) и настройка производительности
  • помощь в тюнинге SQL запросов.

Мы ожидаем:

  • опыт DBA PG/GP/Clickhouse в кластерных конфигурациях, понимание настроек, организации кластеров.
  • опыт администрирования Linux под СУБД или серверами приложений
  • опыт поддержки больших связных ландшафтов
  • опыт настройки производительности для сложной обработки значительных объемов в PG|GP|Hadoop|Clickhouse|других МРР (от 2х технологий)
  • умение быстро изучать в деталях новые решения

Будет плюсом:

  • опыт настройки PXF, gpfdist, мониторинга и бекапирования MPP
  • понимание особенностей построения различных серверов, СХД, сетевых устройств, организации и настройки сетей.
  • опыт сайзинга вычислительной инфраструктуры под СУБД.

Мы предлагаем:

конкурентная заработная плата: оклад + бонусы

масштабные и интересные задачи в agile команде

социальный пакет: ДМС, страхование за рубежом, льготное кредитование

бесплатный тренажерный зал и спортивные групповые занятия

дисконт-программы от компаний партнеров: страхование, туризм

обучение и тренинги

профессиональный и позитивный коллектив.