Data Engineer

Дата размещения вакансии: 27.04.2024
Работодатель: БиАйЭй-Технолоджиз
Уровень зарплаты:
з/п не указана
Город:
Санкт-Петербург
Московский проспект 94
Требуемый опыт работы:
От 3 до 6 лет

BIA-Technologies — бизнес-интегратор и разработчик инновационных программных решений. Более 10 лет мы создаём IT-продукты и оптимизируем процессы для повышения эффективности бизнеса своих заказчиков. BIA Technologies — признанный эксперт в создании цифровых решений для крупных холдинговых компаний.

Чем предстоит заниматься:

  • Развитие озера данных на базе Hadoop: проектирование озера данных, написание пайплайнов для подключения новых источников, написание интеграционных механизмов, в том числе для передачи данных в DWH, реализация механизмов параллельной обработки данных на базе Hadoop.

Что важно:

  • Опыт работы с Hadoop и его экосистемой Hive, Spark, Kafka, Airflow и т. д;
  • Знание SQL;
  • Опыт программирования на Python;
  • Отличное понимание процессов ETL/ELT и как их применять;
  • Понимание принципов CI/CD;
  • Широкий кругозор в технологиях хранения, обработки и анализа данных (СУБД, ETL-инструменты, BI-решения и т.д.)

Будет плюсом:

  • Опыт в администрировании Linux;
  • Опыт работы с RDBMS: MSSQL Server и/или PostgreSQL;
  • Опыт работы с Docker, Kubernetes;
  • Опыт в областях: машинное обучение, интеллектуальный анализ данных, рекомендательные системы.

Мы предлагаем:

  • Достойный уровень заработной платы, официальное оформление в аккредитованной ИТ компании, социальные гарантии;
  • Комфортные условия: гибкое начало рабочего дня, удаленный или гибридный формат работы, свободный дресс-код и активную корпоративную культуру ;
  • ДМС + Программа «Кафетерий льгот»: сотрудники за счет компании могут компенсировать расходы на страхование, обучение, спорт, спортивный инвентарь;
  • Развитие и обучение: ежегодный performance review, внутреннее и внешнее обучение, корпоративная библиотека;
  • Участие в интересных масштабных проектах с применением современных технологий;
  • Возможности профессионального и карьерного роста;
  • Наставничество от опытных коллег.