Data Engineer

Coralclub - международная компания, развивающая инновационные продукты для улучшения качества жизни и здоровья людей. У нас собственные R&D, eCom платформа и современные цифровые решения для автоматизации бизнеса и логистики. Coralclub - это масштаб, динамика, прямое влияние на миллионы пользователей и высокая экспертиза внутри команды. Развиваем цифровые продукты для бизнеса. Работаем с современным стеком и высокими нагрузками.
Присоединяйтесь к нашей команде!

Обязанности:

• Проектирование архитектуры данных, в том числе разработка и поддержка слоев хранения (Raw, Core, Marts) в PostgreSQL и ClickHouse.
• Разработка ELT-пайплайнов трансформации данных внутри БД (преимущественно на SQL в PostgreSQ с использованием Airflow для оркестрации).
• Проектирование гибридных пайплайнов: разработка процесса трансформации нереляционных данных из ClickHouse в реляционные структуры PostgreSQL с последующим использование в Core
• Трансформация данных: очистка, агрегация и подготовка витрин данных для BI-аналитиков и бизнес-пользователей.
• Поддержка существующих интеграций (мониторинг стабильности переливки данных из источников в наше хранилище) и добавление новых при необходимости.

Требования:

• Опыт работы в роли Data Engineer или Analytics Engineer от 2-3 лет. Нам важно, чтобы ты понимал принципы построения слоистой архитектуры данных.
• Экспертный уровень владения SQL. Нужно уметь работать со сложными структурами (JSONB, массивы), анализировать планы выполнения запросов (EXPLAIN) и проводить рефакторинг кода.
• Уверенный Python. Навыки написания ETL-скриптов, работа с библиотеками для взаимодействия с БД и понимание того, как писать поддерживаемый код.
• Опыт с Apache Airflow. Умение проектировать пайплайны, настраивать ретраи и мониторить выполнение задач.
• Понимание специфики PostgreSQL и ClickHouse. Нужно знать, как эффективно перекладывать данные между строчной и колоночной базами, учитывая их особенности.
• Будет плюсом опыт работы с Docker и навыки настройки мониторинга для своих процессов.

Условия:

• Оформление по ТК РФ с первого дня;
• График 5/2, гибрид или удаленно; с 9 до 18 ч. или с 10 до 19 ч;
• Работу в крупной международной компании, возможность профессионального и карьерного развития;
• Семинары, тренинги, конференции внутри компании;
• Компенсация внешнего обучения;
• Скидки на приобретение продукции компании до 50% и дополнительные программы лояльности для сотрудников.