Senior Data-инженер (ETL+Python)

Наша команда занимается развитием и поддержкой BI для Службы внутреннего аудита. Перед нами стоит амбициозная задача по вендорозамещению BI платформы QlikSense на АС Навигатор.

В рамках проекта предстоит создание новой архитектуры по поставке данных и автоматизации процесса.

Присоединившись к нам, можно не только прокачать hard skills в инструментах подготовки данных и Python разработке, но и погрузиться в мир искусственного интеллекта и больших данных.

Вам предстоит:

• разрабатывать и оптимизировать ETL/ELT-процессы с использованием Apache Airflow
• проектировать и поддерживать потоковую обработку данных начального уровня с помощью Apache NiFi
• создавать сложные SQL-запросы и оптимизировать работу с реляционными БД (PostgreSQL/ GreenPlum) на всех этапах пайплайна
• участвовать в проектировании схем данных и витрин для эффективной аналитики
• сопровождать существующие и подключать новые источники данных.

Мы ожидаем:

• опыт работы с Apache Airflow от 2 лет, умение строить нелинейные DAG
• экспертный уровень SQL и опыт с PosrgreSQL
• базовый практический опыт с Apache NiFi (умение строить DataFlow)
• уверенное владение Python для автоматизации
• опыт работы с ETL инструментом (Informatica PC).

Будет плюсом:

• опыт с ClickHouse (практический опыт разработки и оптимизации ETL-процессов)
• опыт работы с Qlik Sense
• опыт в оптимизации процессов сбора, первичной обработки и хранения большого объема данных из различных типов источников.

Мы предлагаем:

• офисный/гибридный формат работы (1 день удаленно)
• годовой бонус и ежегодный пересмотр
• расширенный ДМС с первого дня + стоматологию и льготное страхование для семьи
• корпоративный университет Сбера, внутреннюю образовательную платформу, участие в IT-конференциях
• офис на Таганской с зонами отдыха и спортзалом (Большая Андроньевская д.6)
• льготную ипотеку в Сбере, корпоративную пенсионную программу, подписку СберПрайм+, скидки от партнеров и сервисов группы компаний.