Data Engineer

Мы российская быстрорастущая платформа, созданная для взаимодействия разработчиков и ведущих компаний России.

У нас множество компаний-партнёров, которые готовы принять к себе в команду Data инженера для работы над современными продуктами.

Одно из наших преимуществ-это оперативный процесс найма. Обычно 1-2 собеседования независимо от компании.

Задачи:

• Разрабатывать, поддерживать и развивать пайплайны обработки данных с использованием Apache Airflow;
• Автоматизировать процессы загрузки, трансформации и доставки данных из различных источников;
• Оптимизировать SQL-запросы и Python-код для повышения производительности систем;
• Взаимодействовать с командами аналитиков и разработчиков для решения бизнес-задач и интеграции сервисов;
• Участвовать в проектировании и улучшении архитектуры ETL-процессов;
• Работать с файлами Excel: парсинг, извлечение и преобразование данных.

Требования:

• Уверенное владение Python, включая работу с дата-фреймами (pandas, numpy);
• Продвинутый уровень владения SQL;
• Опыт промышленной разработки и поддержки DAG'ов в Apache Airflow;
• Понимание принципов построения хранилищ данных и ETL-процессов.

Будет плюсом:

• Опыт работы с другими СУБД (ClickHouse, Greenplum) и облачными платформами;
• Знание Docker/Kubernetes.

Условия:

• удаленный формат работы;
• оформление по ИП;
• полная занятость.