Data Engineer

Международная продуктовая IT компания, которая занимается разработкой и поддержкой высоконагруженных проектов для крупных компаний, основная часть которых представляет собой развлекательные онлайн-сервисы, в поисках Data Engineer.

Чем предстоит заниматься:

• Разрабатывать и поддерживать ETL/ELT пайплайны в Data Lakehouse архитектуре с Iceberg;
• Разрабатывать витрины в ClickHouse;
• Разрабатывать потоки данных из различных источников через Kafka и обработкой в Spark;
• Настраивать и внедрять DataQuality проверки;
• Работать с CDC и Debezium.

Требования:

• Опыт работы с Data Lakehouse архитектурой (предпочтительно с Iceberg);
• Глубокое знание Python и SQL, опыт оптимизации запросов;
• Опыт работы с инструментами оркестрации (Airflow);
• Знание Big Data инструментов (Spark, Kafka, Trino);
• Понимание Data Quality и Data Governance процессов;
• 5+ лет опыта работы на позиции Data Engineer;
• Опыт реализации интеграции с реляционными и NoSQL базами;
• Знание инструментов CDC (Debezium, Kafka Connect).

Будет плюсом:

• Опыт работы с BI инструментами (Power BI, Qlik, Metabase, Superset);
• Опыт работы с MongoDB;
• Понимание DevOps: Docker, Kubernetes.

Условия:

• Удаленный/офисный/гибридный формат работы;
• Возможность поработать на крупных проектах;
• Компания заинтересована в развитии своих сотрудников: готовы привлекать наставников и оплачивать курсы для повышения квалификации в целях бизнеса;
• Отсутствие бюрократии, быстрое согласование необходимых вещей;
• Оплачиваемые отпускные и больничные;
• Годовая премия по результатам работы;
• Частичная компенсация спортзала;
• Частичная компенсация английского языка или психолога (на выбор);
• Компания поддерживает сотрудника в важные периоды жизни;
• Предоставляем 4 day-off в год за счет компании;
• ДМС после 6 месяцев работы.