Lead Data Engineer в Data Office

Дата размещения вакансии: 11.11.2024
Работодатель: VK
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 3 до 6 лет

Мы строим внутренние сервисы и продукты для использования данных в аналитике, развитии продуктов и машинном обучении. Наша ключевая цель — сделать данные полезными для каждого сервиса и проекта компании VK. С помощью таких технологий, как Python, AirFlow, ClickHouse, YTsaurus, Spark over YTsaurus.

Задачи:

  • улучшать работу Data-платформы, делать её единой точкой входа для всей VK;
  • внедрять новые расчёты с использованием Python, SPYT, Airflow, SQL, внутренних инструментов оркестрации;
  • управлять командой инженеров, оценивать, планировать и разбивать задачи на части, повышать мотивацию сотрудников, заниматься наставничеством;
  • развивать дата-продукты, в том числе по гео, портрету пользователя, проведению экспериментов и не только;
  • работать с данными всех основных юнитов VK.

Требования:

  • высшее математическое или техническое образование;
  • знание базовых алгоритмов и структур данных;
  • знание Python, Scala, SQL;
  • опыт проектирования схемы базы данных — структур таблиц и связей между ними;
  • опыт обработки данных на Python.