Data Engineer

Сегодня билайн — компания изменений, чутко реагирующая на потребности рынка и людей. А ещё билайн — это команда, объединённая общими ценностями и общей целью — быть лидером телеком и digital рынков, предоставляя нашим клиентам новейшие продукты и услуги, а также сервис самого высокого уровня.

Сейчас у вас есть возможность присоединиться к лучшей команде в качестве Data Engineer!

Обязанности:

• Создание пайплайнов для обработки данных начиная от шага получения данных из сторонних систем и заканчивая построением витрин данных;
• Ручная или автоматическая проверка правильности миграции;
• Создание DAG для запуска отчётов по расписанию;
• Добавление метрик и алертов на актуальность исходных данных;

Требования:

• Опыт работы в роли Data Engineer от 2 лет;
• Spark - понимание архитектуры Apache Spark, опыт по анализу и оптимизации обработки данных на Spark от 1 года;
• Scala - знание на уровне написания пайплайнов Spark (либо желание перейти на Scala с Python);
• AirFlow - опыт в использовании от 1 года;
• Python - знание на уровне написания DAG по имеющемуся примеру;
• Hadoop, Hive - опыт от 1 года;
• SQL - на уровне чтения и понимания кода Hive;
• Linux и Bash - на уровне пользователя;
• Готовность общаться с бизнесом и отвечать end-to-end за задачу;

Будет плюсом:
Опыт работы с Grafana, VictoriaMetrics или аналогами
Опыт работы с потоковой обработкой данных
Знакомство с инструментом NiFi
Хороший опыт с CI (используется Gitlab CI)
Опыт работы с окружением разработчика (Jira, Confluence)

Готовы предложить:

• Трудоустройство в аккредитованную ИТ-компанию.
• Возможность работать дистанционно на территории РФ.
• Сплоченную команду профессионалов, в которой можно не только успешно реализовывать проекты, но и перенимать опыт и развиваться.
• Обучение, участие в интересных проектах и расширение профессиональной экспертизы: мы участвуем в конференциях, митапах, публикуемся на Хабр и т.д.
• Конструктивную и открытую рабочую атмосферу.
• Полис добровольного медицинского страхования, обслуживаемый в лучших клиниках.
• Корпоративные скидки на фитнес, обучение, путешествия и т.п.
• Служебную сотовую связь.