Data Engineer

Дата размещения вакансии: 24.11.2024
Работодатель: evrone.ru
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 1 года до 3 лет

Команда Evrone занимается продуктовой разработкой стартапов и помогает в цифровой трансформации бизнеса в России, США и Европе.

Мы занимаемся технически сложными, высоконагруженными, наукоёмкими проектами, проектами с большой бизнес логикой или большой серверной инфраструктурой.

Нам доверяют: аналитику, проектирование интерфейсов и дизайн, разработку, инфраструктуру и эксплуатацию. Мы становимся технической командой проекта целиком или консультируем и расширяем возможности существующих команд наших клиентов.

Вся команда работает удаленно с 2008 года. Мы знаем как организовать распределенную разработку комфортно и эффективно. Есть офисы для работы и встреч в Москве и Воронеже, а также офисы продаж в Сан-Франциско и Берлине.

Сейчас мы находимся в поиске Data Engineer на проект, связанный со стримингом музыки.

Это аудиосервис, специализирующейся на высоком качестве записи, уникальном стереозвучании и обилие стереоэффектов в композициях.

Ищем в команду DE Business - команда занимается развитием процессов обработки данных для бизнеса (интеграция и обработка данных). Ключевые бизнес-заказчики - аналитики данных, data science, продуктовые команды. Сейчас живем на Hadoop-стеке, но уже начали переход на LakeHouse-архитектуру (S3, Spark+k8s, Trino, Iceberg), есть возможность поработать на новом стеке, который сейчас активно развивается на рынке.

Приятные особенности: известный проект, большое количество пользователей, современные подходы к разработке, AI&ML.

Задачи:

  • Проводить базовую аналитику и сбор требований от заказчиков для реализации ETL-пайплайнов обработки данных;
  • Разрабатывать ETL-пайплайны обработки данных для бизнес-пользователей и data science;
  • Подключать новые источники данных и интегрироваться в большую экосистему партнеров;
  • Проводить тестирование и отладку ETL-пайплайнов на тестовой среде;
  • Заниматься поддержкой ETL-пайплайнов (3-я линия);
  • Документировать результаты разработки;
  • Участвовать в выводе разработанных ETL-пайплайнов в прод-среду.

Какой опыт для нас важен:

  • Релевантный опыт работы от 2-х лет;
  • Опыт создания ETL-пайплайнов на AirFlow;
  • Опыт работы с пакетной обработкой больших данных;
  • Знание Python, SQL;
  • Практический опыт работы с AirFlow, Hadoop, Spark, Kafka;
  • Базовые знания kubernetes и опыт его использования в работе.

Будет плюсом:

  • Опыт работы c data science командой;
  • Опыт снижения time-to-data (снижение времени доставки данных до пользователей).

Почему Evrone, и что мы предлагаем?

  • Удаленную фулл-тайм работу. Но если вы хотите ходить в офис, они есть в Москве и Воронеже;
  • Мягкий график. Достаточно синхронизировать тайм-зоны и иметь пересечения рабочего времени с командой;
  • Качественный онбординг и HR-менеджмент (1:1, Grow Review). По желанию меняем проекты, не даем стагнировать;
  • При формировании команды проекта учитываем профессиональные и/или личные интересы наших сотрудников;
  • Работу в разновозрастном, разнополом и потрясающе дружном и профессиональном коллективе;
  • Хорошо организованный воркфлоу, отсутствие бюрократии. Работа на доверии.

Одна из ценностей Evrone – работа с удовольствием.
Для этого мы придумали Evrone Benefits. Каждому из нас выделяется годовой бюджет, автоматически пополняемый каждый новый год вашей работы в Evrone. Его можно потратить на полезные категории трат, направленные на:

  • ДМС и здоровье;
  • Спорт и абонемент для фитнеса или инвентарь для спорта;
  • Курсы иностранного языка;
  • Техника для работы и улучшение рабочего места;
  • Обучение: курсы, тренинги, мастер-классы, семинары, книги и конференции.

Бонусы и премии:

  • Премии за локальные успехи и отличную работу в целом;
  • Автоматическая индексация зарплаты без необходимости кого-то об этом просить, а также повышение зарплаты по мере роста компетенций;
  • Премии за привлечение новых сотрудников и новых клиентов;
  • Дополнительная премия за выступления на конференциях и митапах;
  • У вас есть возможность принять участие в проведении технических интервью специалистов, которые могут стать вашими коллегами. Проведение интервью оплачивается.

Обучение и рост компетенций:

  • Проводим внутренние митапы по различным стекам;
  • У нас есть культура менторства. В повседневных задачах и планировании карьеры будет помогать наставник;
  • Есть внутренняя библиотека с электронными книгами и записанными курсами;
  • Работаем и дружим с западными заказчиками, есть возможность практиковать свой английский.

Возможность стать докладчиком или автором:

Evrone помогает развиваться сообществу разработчиков. Мы делаем самую большую в России конференцию по Ruby — RubyRussia, проводим технические митапы, делаем свой новостной дайджест, а также спонсируем и помогаем в проведении конференций по Go, Python, React/Vue и функциональным языкам.

Наши инженеры выступают на ведущих конференциях России и Европы и вносят вклад в Open Source проекты, мы берем интервью у лидеров комьюнити и пишем статьи на самые горячие темы индустрии. В этом году мы ставили стенд и выступали на конференциях Highload и TeamLeadConf.

  • Если вы хотите выступить на офлайн конференции, мы поможем вам подготовить контент для доклада и сделаем крутые слайды. DevRel Evrone (Григорий Петров) поможет подготовиться к выступлению на конференции, окажем поддержку на самой конференции и подготовим материалы с вашим докладом. Также Evrone оплатит вам все расходы на подготовку, поездку и участие в конференции;
  • Если вы хотите выступить на онлайн конференции, помимо помощи по подготовке доклада и подбору конференции, мы организуем вам студийную съемку или трансляцию вашего доклада;
  • У нас есть блоги на всех популярных платформах России и мира. Наши редакторы и профессиональные авторы еженедельно выпускают новые материалы;
  • Если вы написали статью, мы нарисуем для нее иллюстрации и поможем вам ее оформить и опубликовать. Если у вас есть только идея - редакторы помогут сформулировать мысли, оформить пост самостоятельно и правильно опубликовать для максимального охвата. Конечно же, Evrone оплатит часы и любые затраты, потраченные на подготовку материала;

Возможность прокачаться в Open Source:

  • Если у вас есть популярные open source проекты – мы поможем с их продвижением и окажем поддержку в развитии;
  • Если вы контрибьютите в популярные проекты с открытым исходным кодом, мы оплатим часы, которые вы на это потратили.
  • Если вы ничего этого не делаете, но очень хочется начать – в Evrone есть менторы, которые помогут вам сделать первые шаги: подберут задачки для старта, помогут решить их и правильно оформить pr.

Отдых и развиртуализация:

Мы собираемся несколько раз в году, чтобы увидеться лично. В Evrone есть несколько событий, которые собирают вместе весь наш коллектив. Поэтому, где бы вы ни находились, компания оплатит вам дорогу и все расходы на корпоратив.