Astrum Entertainment — это один из крупнейших российских разработчиков и издателей компьютерных и мобильных игр. Портфолио компании насчитывает более 20 игр, включая такие хиты, как Warface, Perfect World, Аллоды Онлайн и Atomic Heart. Astrum Entertainment работает с продуктами разных жанров: MMORPG, шутеры, стратегии и другие. Команда компании состоит из профессионалов, которые стоят у истоков российского геймдева.
Задачи:
- разработка и поддержка корпоративного хранилища данных на стеке Hadoop.
- проектирование, разработка и оптимизация ETL/ELT-пайплайнов;
- написание и оптимизация сложных SQL-запросов и скриптов;
- оптимизация хранения и обработки данных для повышения качества сервисов анализа данных;
Требования:
- понимание принципов построения DWH;
- отличное знание SQL и опыт работы с реляционными СУБД (PostgreSQL/MySQL);
- опыт написания пайплайнов на Python;
- опты работы с Apache Airflow;
- знание принципов потоковой обработки данных и практический опыт работы с Kafka;
- умение разбираться в сложных процессах преобразования данных
- опыт работы с экосистемой Hadoop (HDFS, Hive, Impala)
Будет плюсом:
- глубокие знания и опыт администрирования в экосистеме Hadoop (HDFS, YARN, Hive, Impala)
- опыт работы со Spark/PySpark;
- знание Scala;
- навыки работы с ClickHouse
- знания в стеке S3/Iceberg/Trino
- хорошие коммуникативные навыки
Мы предлагаем:
