Data Engineer / Дата-инженер

Основные задачи:

• Участие в разработке и поддержании высоконагруженного сервиса (python, FastAPI);
• Разработка и оптимизация ETL пайплайнов с помощью Spark и Airflow по сбору, обработке, хранению и выгрузке данных;
• Построение витрин данных для аналитических отчетов на HDFS;
• Организация эффективного хранения логов, настройка мониторинга и алертинга;
• Подготовка и поддержание актуальной технической документации;
• Взаимодействие с бизнес-заказчиками, дата-аналитиками и DevOps

Требования:

• Отличное знание Python;
• Опыт работы с Hadoop/Spark, понимание принципов работы распределенных вычислений;
• Знание SQL, понимание принципов работы реляционных БД (Postgres);
• Знание основ работы с командной строкой и базовых утилит Linux;
• Опыт работы с git;
• Опыт работы с Airflow;
• Понимание и интерес к области больших данных;

Будет плюсом:

• Опыт backend разработки (FastAPI)
• Опыт frontend разработки (javascript)
• Опыт работы с нереляционными БД (Redis)
• Опыт работы c Kafka
• Опыт работы с системами мониторинга (Prometheus, Grafana)
• Опыт работы с высоконагруженными системами
• Знание http/https, dns и предметной области работы операторов (кликстрим, система сбора логов)
• Понимание работы рекламных технологий, RTB-аукциона
• Опыт в DevOps / Тестировании
• Знание Scala

Что мы предлагаем:

• интересные рабочие задачи и возможность профессионального развития;
• классное рабочее место в самом сердце Москвы. Но возможен и гибридный формат работы;
• ДМС после испытательного срока;
• нормированный рабочий день с 9 до 18.

Присоединяйся к нам и стань частью команды, которая меняет будущее с помощью данных!