Эксперт ETL (DataOps)

АЛРОСА — крупнейшая в мире алмазодобывающая компания и единственная, которая объединяет весь производственный цикл от поисков и разведки алмазных месторождений до огранки бриллиантов и продажи ювелирных изделий с ними.
АЛРОСА Информационные технологии — представляет различные IT-услуги структурным подразделениям и дочерним организациям. Мы приглашаем на работу Эксперт ETL (DataOps) в Направление интеграции Центра компетенций по управлению данными.

Что будет входить в ваши обязанности:

• Разработка и поддержка автоматизированных ETL/ELT процессов;
• Интеграция источников данных в Data Lake;
• Сбор, обработка и парсинг «сырых» данных;
• Написание сервисов для работы с внешними источниками/потребителями данных;
• Создание инфраструктуры передачи больших данных;
• Обработка и аркестрация данных при помощи Spark и Airflow, NiFi и аналоги;
• Обработка real-time данных;
• Написание ТЗ для DevOps, DevSecOps, Data Engineer;
• Развитие систем управления данными, систем ETL и BI отчетности.

Мы предлагаем:

• Оформление в штат компании по ТК РФ, все условия трудоустройства прозрачные и честные;
• Работа удаленно или в офисе, 50/50;
• Уровень заработной платы зависит от ваших знаний и опыта, состоит из оклада и квартальных премий — обсуждается с успешными кандидатами;
• Корпоративная программа ДМС (с стоматологией);
• Доступ к онлайн платформе «Понимаю» и беговому клубу ALROSA Running club;
• Возможность обучения за счет компании и карьерный рост;
• Вы будете работать в команде профессионалов, у нас много интересных задач.

Требования к кандидату:

• Опыт работы с ETL инструментами;
• Опыт проектирования и реализации загрузки и преобразования данных;
• Опыт проектирования и разработки архитектуры БД;
• Опыт работы c MPP системами (Greenplum);
• Опыт разработки Python и Java/Scala;
• Опыт разработки сложных SQL запросов;
• Опыт работы и понимание принципов оптимизации структур данных, потоков данных и алгоритмов.

Преимуществом будет:

• Уверенные знание Python;
• Опыт развития BI отчетности;
• Знание принципов гибкого подхода MLOps;
• Знание Dags.

Ключевые навыки:

Kafka, ETL, ELT, NiFi, Python, SQL, Postgre, Hadoop, Greenplum, Big data.

Ждем вашего отклика и желаем удачи на собеседовании!

АЛРОСА — мировой лидер по добыче алмазов и единственная компания, которая объединяет полный цикл производства от поиска алмазных месторождений до огранки бриллиантов и продажи ювелирных изделий с ними. За более чем 65 лет своей истории мы преодолели огромный путь от одной геологической экспедиции до группы предприятий в разных городах России. Компания сочетает накопленную годами уникальную экспертизу и современные технологии, в том числе цифровые решения на производстве. Коллектив АЛРОСА — это более 30 тысяч профессионалов своего дела, каждому из которых мы предлагаем достойную оплату труда и соцпакет, возможности для развития и роста, уверенность в завтрашнем дне.

АЛРОСА: Алмазный лидер. Стабильное будущее.