Senior Data Engineer

Дата размещения вакансии: 28.10.2024
Работодатель: Петрович-Тех
Уровень зарплаты:
з/п не указана
Город:
Санкт-Петербург
Требуемый опыт работы:
От 3 до 6 лет

«Петрович-Тех» строит и развивает цифровую экосистему для крупного ретейла в области строительства и DIY (коротко о «Петровиче»: 28 лет на рынке, №1 среди DIY-магазинов в России (по версии DIY&Household awards 2019), а наш интернет-магазин ­входит в топ-20 крупнейших интернет-магазинов России (E-Commerce Index TOP-100)).

Специфика предметной области определяет основные направления ИТ-экспертизы: построение высоконагруженных систем, прикладная часть Machine Learning и Data Science, проектирование микросервисной архитектуры и многое другое. А ещё с нами у тебя будет возможность влиять на конечный продукт и видеть результаты своей работы в реальном мире, действовать без многоступенчатых согласований; и возможности для развития, не уступающие тем, что есть ИТ-корпорациях.
И, конечно, в первую очередь, «Петрович-Тех» — это люди, наш продукт и компания для людей и про людей. Сегодня в нашей команде уже больше 350 крутых специалистов, и, возможно, мы ищем именно тебя!

Сейчас мы находимся в активном поиске Data Engineer

Чем предстоит заниматься:

  • разработка хранилища данных на базе ClickHouse;
  • построение ETL-процессов;
  • написание / оптимизация / профилирование SQL/NoSQL запросов;
  • расчет сложных аналитических показателей в витринах данных;
  • настройка ClickHouse (шардинг, репликация) в т.ч. взаимодействия с Kafka (попадание сырых данных, решение возможных проблем с очередностью сообщений, валидностью данных);
  • участие в тестировании потоков с целью обеспечения их стабильной работы;
  • написание backend сервисов на Java;
  • участие в разработке архитектуры, процессов и инструментов для работы с данными;
  • обеспечение контроля качества данных, мониторинг, анализ и устранение проблем с качеством данных.

Что мы ждем от тебя:

  • глубокие знания SQL;
  • умение работать с планами запросов;
  • опыт работы с ClickHouse;
  • опыт работы с брокерами сообщений (Kafka);
  • опыт работы с Kubernetes проектами;
  • опыт работы с Java;
  • практический опыт участия в проектах по созданию DWH, Data lake;
  • практический опыт построения и развития высоконагруженных систем.

Наш стек:
ClickHouse, Pythоn, SQL, AirFlow, Spark, Apache Kafka, Yandex Cloud, Big Data, Kubernetes, FastAPI\Flask API, Java

Что мы предлагаем:

  • официальное трудоустройство в аккредитованную ИТ компанию ООО "Петрович-Тех";
  • полис ДМС через 3 месяца, ДМС+стоматология через год;
  • участие в конференциях и обучение;
  • йога в офисе, команды по баскетболу, волейболу, футболу;
  • классные корпоративы;
  • график работы: 5/2, удаленный формат работы, но можно работать в нашем уютном и лучшем офисе Санкт-Петербурга на Беговой, у нас есть велопарковка и корпоративный транспорт от м. Черная речка, м. Комендантский проспект, м. Лесная до офиса и обратно;
  • чай, кофе, печеньки;
  • врач в офисе (1 раз в неделю);
  • приветственный набор;
  • "Бери с собой друзей!" — за каждого сотрудника, трудоустроенного по твоей рекомендации, ты получишь интересное денежное вознаграждение.