Data Engineer

Мы — Wildberries. Мы — это крупнейший маркетплейс Европы, 30 млн пользователей ежедневно и технологические задачи, у которых нет аналогов. Наша компания стабильно развивается и работает в усиленном режиме: использует современный стек и новейшие технологии, разрабатывает множество новых hi-tech продуктов.

В Управление развития CRM и BI Банка требуется Data engineer.

Обязанности:

• Разрабатывать и оптимизировать пайплайны данных на Airflow/Python/Spark;
• Создание и поддержка аналитической DWH (СlickHouse/Postgres);
• Создание и развитие процессов управления данными и их качеством;
• Оптимизация процессов поставки данных (Kafka, Nats, Postgres);
• Подключать новые источники, интеграции с другими поставщиками данных;
• Участвовать в разработке прикладных сервисов.

Требования:

• Уверенный опыт программирования на Python (от 2-х лет);
• Уверенные знания Apache Spark, Apache Airflow, SQL (от 2-х лет);
• Опыт работы с Datalake/DWH и Kubernetes, Kafka;
• Опыт работы с Hadoop;
• Опыт работы с СlickHouse;
• Опыт работы с высоко нагруженными системами и большим объёмом данных

Условия:

• Комфортный офис в Москве (БЦ. Романов двор) и возможность перейти на полную удаленку или гибрид после испытательного срока;
• Внутренние и внешние митапы в контуре WB Tech;
• Корпоративные скидки на спортивные программы и изучение английского языка;
• Быстрый процесс общения - 1-2 технических интервью и оффер;
• Гибкое начало рабочего дня;
• ДМС АльфаСтрахование.