Архитектор хранилища данных

Дата размещения вакансии: 16.01.2025
Работодатель: Selecty
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 3 до 6 лет

IT-компания Selecty в активном поиске Архитектора хранилища данных быстрой обработки данных на тех. стеке ClickHouse в крупной финансовой компании РФ.

Офис компании находится в г. Москва, но возможна работы из любой точки мира.

В ГК Selecty более 100 IT-проектов и 100+ IT-рекрутеров. C 2013 года успешно решаем задачи любой сложности в рамках цифровой трансформации для крупного бизнеса.

Пожелания к кандидату:

  • Опыт работы в аналогичных проектах разработки/миграции хранилищ данных не менее 5х лет, на лидерских позициях – не менее 2х лет;
  • Опыт формирования методологии для ведения модели метаданных для описания систем источников;
  • Опыт формирования методологии для ведения модели данных для описания объектов различных слоев ХД (включая NC, домены значений и пр.);
  • Опыт формирования концептуальной, логической и физической моделей данных различных слоев ХД: перечень предметных областей, таблицы и связи между ними;
  • Знание различных подходов к проектированию и реализации хранилища данных, их качественных отличий и возможностей;
  • Опыт формирования модели метаданных как основных модулей ХД (например, подистемы интеграции данных), так и дополнительных (модули ККД, ручных корректировок и пр.);
  • Знание методологии и подходов к тестированию, опыт автоматизации процессов тестирования;
  • Опыт проектирования механизмов и компонент загрузки данных в хранилище;
  • Знание и понимание различных подходов к моделированию данных детального слоя ХД, опыт промышленной реализации детального слоя с методом Data Vault;
  • Опыт разработки и миграции хранилищ данных на MPP СУБД GreenPlum;
  • Опыт работы с CI/CD;
  • Уверенные знания в области оптимизации запросов;
  • Опыт использования Apache Airflow для оркестрации ETL\ELT-пайпл
  • Знание технологий MS SQL Server, GreenPlum, Apache Airflow, Apache Ni-Fi, Clickhouse.
  • Опыт реализации проектов по построению DataLake, DWH, HotData систем на базе Hadoop и Clickhouse в качестве архитектора.
  • Понимание принципов map reduce, hdfs, S3 и построения mpp систем
  • Знание Spark, Python, SQL

Комфортные условия и полезные бонусы от Selecty:

  • Офис в Москве или полностью удаленный формат работы;
  • Оформление по ТК РФ, или в качестве ИП;
  • Программы добровольного медицинского страхования со стоматологией;
  • Компьютер и софт необходимые для комфортной работы;
  • Корпоративная программа в фитнес-центрах;
  • Реферальная программа для сотрудников (бонус за рекомендации);
  • Изучение английского языка - Skyeng;
  • Регулярные performance review и HR координатор у каждого сотрудника.

Ждем тебя в команде!