Разработчик Spark

Дата размещения вакансии: 07.10.2024
Работодатель: Неофлекс
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 1 года до 3 лет

Неофлекс — это аккредитованная IT-компания, специализирующаяся на интеграциях и разработке программного обеспечения + предоставлении высококачественных IT-решений для бизнеса.

Мы ценим креативность, инициативность и стремление к саморазвитию. Присоединяйтесь к Неофлекс и станьте частью динамичной команды, где ваши идеи и вклад будут иметь значение!

СТЕК:

SQL, DWH (корпоративное хранилище данных), Hadoop (SparkSQL, HDFS, Yarn, Hive), Git, Python

ЧЕМ ТЫ БУДЕШЬ ЗАНИМАТЬСЯ:

  • участвовать в проекте по развитию корпоративного хранилища данных;
  • разрабатывать сырой и детальный слой данных (S3, HDFS, PySpark);
  • создавать ETL потоки (обязательно построение инкрементальной загрузки);
  • писать и оптимизировать сложные SQL-запросы;
  • разбирать сложные кейсы, связанные с производительностью;
  • помогать аналитикам превращать их ad hoc запросы в регулярно обновляемые витрины;
  • работать с AirFlow.

Какой опыт мы ищем:

  • владение инструментами Spark/ Python/ Hive/yarn/hadoop;
  • представление об оркестраторах: oozie, Airflow;
  • владение теорией о трансформации и преобразовании данных;
  • высокий уровень SQL.

Что мы предлагаем:

  • оформление в стабильную и динамично развивающуюся компанию по ТК РФ, оплачиваемый отпуск и больничный без больничного +4 дня в году;

  • достойная «белая» заработная плата (обсуждается по результатам собеседования);

  • ДМС с расширенным спектром услуг (стоматология), включая страховку для выезжающих за рубеж;

  • гибкие процессы работы без лишней бюрократии;

  • техника для работы;

  • корпоративный английский язык, спорт.

Мы ищем кандидата без привязки к локации