Арбатско-Покровская линия метро Бауманская
Мы — инновационный MVNO сотовый оператор, интегрированный в банковскую экосистему. Наша цель — предоставление передовых решений в области телекоммуникаций и финансов. В связи с расширением команды ищем Data Engineer, который будет заниматься разработкой и поддержкой решений для обработки данных
Обязанности:
- Разработка и поддержка ETL процессов:
Создание и поддержка процессов ETL (Extract, Transform, Load) для интеграции данных из различных источников в центральное хранилище. Это включает настройку пайплайнов данных для регулярного извлечения, преобразования и загрузки данных.
- Проектирование и оптимизация баз данных:
Разработка и поддержка структур данных в реляционных и NoSQL базах данных. Оптимизация запросов и индексов для обеспечения эффективного хранения данных и быстрого доступа к ним.
- Работа с инструментами для обработки больших данных:
Использование инструментов и технологий, таких как Apache Spark и Hadoop, для обработки и анализа больших объемов данных. Настройка кластеров, написание скриптов для обработки данных и проведение анализа.
Требования:
- Опыт работы с SQL для управления и анализа данных.
- Опыт программирования на Python и/или Java для создания скриптов и автоматизации задач.
- Опыт работы с Apache Spark и Hadoop для обработки больших данных.
- Знание принципов и инструментов ETL для интеграции данных.
Будет плюсом:
- Опыт работы с инструментами для управления потоками данных, такими как Apache Airflow.
- Опыт работы с NoSQL базами данных (например, MongoDB, Cassandra).
- Понимание принципов работы с облачными платформами.
Условия:
- Конкурентоспособная заработная плата.
- Гибкий график работы и возможность удаленной работы.
- Возможности для профессионального роста и обучения.
- Дружная и поддерживающая команда.
- Участие в интересных и инновационных проектах в области телекоммуникаций и финансов.
- Забота о здоровье - ДМС.