Software Architect

В Arenadata стартовал новый проект в области управления большими данными в облаках. Нам нужен Software Architect, специализирующегося на построении cloud-native сервисов на основе Spark и Hadoop. Мы ищем архитектора, который займется проектированием и разработкой платформы для построения Lakehouse, с использованием cutting-edge технологий.

Мы ждем, что вы:

• Знаете принципы, паттерны и практики проектирования программных систем, умеете применять их на практике;
• Владеете глубокими знаниями технологического стека хранения и обработки данных Datalake\Lakehouse на базе: Hadoop\Spark, S3, Iceberg\Delta\Hudi, Airfllow\Oozie\Dagster, Trino\Impala, Hue, JupiterHub, Knox, Ranger;
• Понимаете cloud-native подход и инфраструктурные сервисы k8s, S3;
• Знаете фреймворки проектирования архитектуры (например, TOGAF, Archimate и т.п.);
• Знаете этапы жизненного цикла программного обеспечения (ПО), этапы управления проектами разработки ПО.

Будет плюсом:

• Имеете опыт разработки PaaS-сервисов и опыт работы с облачными провайдерами;
• Понимаете концепции ACID-транзакций в Lakehouse;
• Понимаете принципы контроля доступа и безопасности данных;
• Имеете опыт подготовки документации вида docs-as-code.