Data engineer

Дата размещения вакансии: 14.01.2025
Работодатель: ИЦ АЙ-ТЕКО
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 3 до 6 лет

Компания «АЙ-ТЕКО» — ведущий российский системный интегратор и поставщик информационных технологий для корпоративных заказчиков. Активно действует на рынке IT России с 1997 года, входит в ТОП-400 крупнейших российских компаний, ТОП-10 крупнейших IT-компаний России.

В связи с активным развитием проектов в компании открыта вакансия Data Engineer.

Наши ожидания от успешного кандидата:

- Опыт построения dwh;
- Построение логических и/или физических моделей данных;
- Опыт построения таблиц с версионированием данных (бизнес/техническая история , ескд2);
- Знание etl процессов;
- Проектирование алгоритмов загрузки (инит/архив, инкремент, выделение дельты изменений);
- SQL - уверенные знания ;
- Опыт работы с инструментарием Hadoop (Spark, Hive, HDFS, YARN);
- Разработка java дистрибутива etl процесса;
- Работа с БД с использованием Spark java framework;
- Настройка параметров spark фреймворка (оптимизация Spark контекста);
- Работа с датафреймами и датасетами;
- Оптимизация плана запросов.
- Опыт со scala будет преимуществом

Стек технологий: java, Hadoop, Spark, Hive, SQL.

МЫ ПРЕДЛАГАЕМ:

- Оформление в соответствии с ТК РФ с первого дня работы;
- Работу в аккредитованной компании;
- Комфортный офис в центре Москвы;
- ДМС с первого дня работы (включая стоматологию);
- Корпоративный спорт: скидки на посещение фитнес-клубов, футбольная и волейбольная секции, собственный йога класс;
- Работу в команде, использующей гибкий подход к разработке;
- Работу в развивающемся IT-проекте с командой специалистов высокого уровня, возможность развития и обмена опытом;
- Необходимую для работы технику, мощный ноут привезём прямо в день оформления.

Откликайтесь))) жду, когда вместе порадуемся вашему офферу