Разработчик (Data Engineer)

Дата размещения вакансии: 23.12.2024

Работодатель: Spice Agency

Уровень зарплаты:

з/п не указана

Город:

Москва

Требуемый опыт работы:

От 3 до 6 лет

Сейчас команда расширяется , и мы ищем Разработчика в команду Дата Инженеров

ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ:

Развитие платформы данных, созданием инструментов обработки данных и фреймворков
Автоматизацией аналитических задач
Разработкой и оптимизацией алгоритмов операционного анализа данных
Взаимодействием с аналитиками данных (data scientists), производственными и функциональными экспертами для определения требований к выгрузке, конвертации и представления данных

ЧЕГО МЫ ЖДЁМ ОТ КАНДИДАТА:

Знание хотя бы 1 языка программирования (желательно Java, Python) на хорошем уровне.
Знание SQL, опыт работы с реляционными СУБД (Oracle, MySQL, PostgreSQL)
Навыки проектирования и реализации системы сбора и обработки данных
Опыт работы с *nix системами

БУДЕТ ПЛЮСОМ

Знание Vertica
Знания алгоритмов в сфере высоконагруженной обработки данных при помощи распределённых вычислений (MR)
Умение работы с Avro, Parquet форматом данных (типы, сжатие, выбор сортировок)
Умение работы с распределенным хранилищем HDFS
Знание и умение работы с AMQP (Kafka, RabbitMQ)
Понимание и умение работы со стеком продуктов на платформе Hadoop. Желательно Spark, Spark Streaming, HBase, Impala, Hive;
Управление кластером Hadoop (развёртывание, мониторинг, оптимизация)
Знание интерфейсов, методов управления разработкой и конфигурациями

НАШИ БОНУСЫ:

Откликнуться