Архитектор аналитических хранилищ и платформ Big Data

Дата размещения вакансии: 23.01.2025
Работодатель: Outlines Technologies
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 3 до 6 лет

Ваша зона ответственности:

• Проектировать логическую и физическую модели данных аналитического хранилища, участвовать в развитии Глоссария.

• Разрабатывать архитектуру аналитического хранилища для BI и кампаний целевого маркетинга, включая Complex event processing.

• Проектировать витрину данных для Data Science (Spark на Kubernetes c хранением в S3-совместимое хранилище), Clickhouse, Postgres).

• Проектировать и участвовать во внедрении ML-платформы.

• Заниматься оптимизацией физической архитектуры данных для сокращения затрат и увеличения быстродействия хранилища АТОЛ и Big data продуктов.

• Вырабатывать и согласовывать с командой предложения по разработке и автоматизированному тестированию.

• Документировать архитектуру решений.

Необходимые навыки:

• Опыт работы архитектором в проектах по созданию и развитию хранилищ от 3 лет.

• Опыт работы в телекоме, ритейле, маркетплейсах - преимущество.

• Высшее профильное/техническое образование.

• Опыт проектирования моделей данных.

• Опыт работы с базами данных в качестве аналитика/разработчика, свободное владение SQL.

• Аналитический склад ума, умение и желание решать сложные задачи.

• Любопытство, готовность самостоятельно исследовать, уточнять задачи и общаться с заказчиком/аналитиками данных напрямую в ежечасном режиме с ежедневно меняющимся бэклогом задач.

• Умение писать и разбираться в коде Python/Java/Scala/Spark/PySpark/Airflow.

• Опыт работ с S3, Postgres, Clickhouse, MS SQL и понимание принципов их работы.

• Опыт работы с высоконагруженными системами – преимущество (будет плюсом).