Data Engineer

Дата размещения вакансии: 26.04.2024
Работодатель: АК АЛРОСА
Уровень зарплаты:
з/п не указана
Город:
Новосибирск
Озерковская набережная 30
Требуемый опыт работы:
От 3 до 6 лет

Чем вы будете заниматься:

  • Сбор, обработка и парсинг «сырых» данных;
  • Поддержка и развитие корпоративного хранилища данных;
  • Определение потребностей и требований бизнес-пользователей;
  • Управление потоками данных;
  • Организация работы с большими данными;
  • Создание витрин данных;
  • Управление данными и распределение на слои (горячие, холодные);
  • Написание SQL-запросов для получения данных;
  • Написание ТЗ для DevOps, DevSecOps, DataOps;
  • Развитие стандарта по управления данными.

Эта работа для вас, если имеете:

  • Опыт проектирования и разработки архитектуры БД;
  • Опыт работы c MPP системами (Greenplum);
  • Опыт разработки Python и Java/Scala;
  • Опыт разработки сложных SQL запросов;
  • Опыт работы с ETL инструментами;
  • Опыт построения отчетности;
  • Опыт работы с нереляционными БД;
  • Понимание специфики работы с персональными данными.

Преимуществом будет:

  • Опыт в качестве DE или аналитика данных;
  • Знание принципов гибкого подхода MLOps;
  • Опыт работы с docker, k8s, kafka.

Ждём ваше резюме!