Data Engineer

Дата размещения вакансии: 19.02.2025
Работодатель: Инновационный центр КАМАЗ
Уровень зарплаты:
з/п не указана
Город:
Москва
Западный административный округ, Можайский район, Инновационный центр Сколково, Большой бульвар 62
Требуемый опыт работы:
От 3 до 6 лет

ООО «Инновационный центр «КАМАЗ» развивает и внедряет самые передовые технологии мирового уровня, которые меняют автомобильную промышленность и жизнь миллионов людей в лучшую сторону.

Электробусы и беспилотные грузовые тягачи каждый может уже увидеть в городах и на магистралях нашей страны. Мы следим за тенденциями, постоянно ищем новые прорывные направления, создаём инновации, проводим эксперименты и внедряем их в реальную жизнь. Компания активно развивает IT- кластер, работу с нейронными сетями и машинным обучением, цифровые порталы, инструменты и многое другое.

Мы ищем опытного специалиста экспертного уровня в команду разработки цифровой системы управления автопарком грузовых автомобилей и перевозками - FLEETLY.

Система будет позволять подключать, анализировать и управлять грузовыми автомобилями любых автопроизводителей, будет включать в себя современные системы телеметрии, удалённую диагностику и мониторинг, инструменты транспортной логистики, серверные вычисления и сбалансированную архитектуру с использованием микросервисов, интеграцию с внешними сервисами и многое другое.

Требования:

  • Опыт работы на позиции Data engineer от 3х лет
  • Знание SQL на продвинутом уровне
  • Опыт разработки на Scala или Python
  • Понимание принципов работы реляционных СУБД
  • Понимание архитектуры и принципов построения DWH и Data Lake
  • Опыт разработки и оптимизации ETL/ELT-процессов (stream, batch)
  • Опыт работы со следующим стеком:

- kafka

- ClickHouse (либо другая MPP), PostgreSQL

- Apache Spark

- Airflow (либо другой оркестратор)

- Hadoop (опционально)

- bash

- docker, kubernetes (опционально)

Тебе предстоит:

  • проектировать и воплощать в жизнь архитектуру потоковой обработки данных для высоконагруженных систем;
  • разрабатывать эффективные алгоритмы обработки и фильтрации данных;
  • разрабатывать event-driven сервисы;
  • выстраивать архитектуру хранения больших данных;
  • оптимизировать потоки данных и вычислительные процессы;
  • взаимодействовать с аналитиками данных, backend разработчиками и другими командами;
  • Разработка ETL-процессов (streaming, batch), а также оптимизация уже имеющихся пайплайнов;
  • Проектирование архитектуры платформы хранения и обработки данных;
  • Возможность влиять на стек инжиниринга данных;
  • Активное взаимодействие с backend, devops и аналитической командами.

✅Мы предлагаем:

  • Работу в аккредитованной IT-компании;
  • ДМС;
  • Достойный уровень заработной платы;
  • Современный комфортабельный офис;
  • Дружелюбная корпоративная культура и увлеченные коллеги;
  • Сложные и интересные задачи, современный стек технологий;
  • Возможность обучения и развития за счет компании;
  • Участие в профессиональных конференциях;
  • Возможность обучения;
  • Работа в стабильной развивающейся компании;
  • Место работы: Инновационный центр «Сколково» (гибрид/удаленная работа - отсутствуют);

Мы культивируем среду комфортную как для профессионалов, так и для новичков, готовых развиваться и реализовывать амбициозные проекты дружной позитивной командой. Вливайся в команду и реализуй вместе проекты межгосударственного масштаба!✊