DataOps engineer

Дата размещения вакансии: 01.07.2024
Работодатель: Innovative People
Уровень зарплаты:
з/п не указана
Город:
Санкт-Петербург
Требуемый опыт работы:
От 3 до 6 лет

Привет, мы Innovative People — аккредитованная IT-компания, 17+ лет на рынке предоставляем комплексные услуги в сфере IT: Заказная разработка| IT аутсорсинг| AR/VR.

Сейчас на проект в продуктовую компанию — одну из лидирующих стриминговых платформ в сфере музыки и потокового аудио приглашаем DataOps инженеров.

Сейчас в команде DataOps 3 человека, усиляем команду +2 опытных специалиста.
Команда DevOps отдельно.

Наш стек: Spark/Trino/Hadoop/ JupiterHub /AirFlow /ETL/ S3/ HDFS /Cassandra

Ближайшие задачи:
-Работа по развитию собственной дата-платформы
-Работа по созданию собственной ML-платформы
-Поддержка MRS-кластера
-Поддержка, настройка etl-процессов и дагов — помощь аналитикам
-Кросс-комадное взаимодействие с дата/ML-инженерами

Что будем делать:
-Поддерживать инфраструктуру отделов Data Science, Data Engineering, Data Analytics
-Развивать процессы CI/CD в рамках используемых ML/DS/DE/DA инструментов
-Настраивать существующие инструменты и разворачивать новые в k8s
-Обеспечивать работоспособность NoSQL баз данных

Мы ожидаем, что ты имеешь такой опыт:
-Уверенное понимание принципов работы Kubernetes.
(При этом для каких целей он использовался — не принципиально)
-Практический опыт работы с terraform/ terragrunt
-Опыт работы с helm
-GitOPS практики
-Опыт разработки на Python на уровне скриптов, понимание кода
-Понимание требований к работе Python-приложений в нагруженной среде
-Инструменты Airflow

Будет плюсом:
Опыт работы с spark, hadoop

Условия работы:
-Удаленка из любой локации, гибкий график, все по ТК Р. Ф. Для желающих есть офис в Мск.
-ДМС со стоматологией с 2-ой рабочей недели
-Возможности посещения профильных конференций, семинаров, курсов повышения квалификации.
-Удобная и мощная техника для работы.
-Прикольный корпоративный мерч (+ всегда открыты новым идеям:)

Этапы взаимодействия:
— HR интервью 30 мин
— Техническое интервью с тех. командой 1 час
— Оффер