Москва
Привет!
Мы ищем Разработчика Scala Senior уровня для построения регуляторной отчетности на основе данных из DWH, озера данных (продуктовая разработка).
Что предстоит делать:
- Подготавливать задачи по расписанию, посредствам Airflow;
- Подготавливать и запускать Spark-приложений (Spark-submit);
- Формировать выгрузки в XML-формате с утвержденной структурой;
- Развивать и поддерживать прикладные витрины на основе реплик из DWH, озера данных;
- Разрабатывать прикладные витрины данных на Платформе данных на базе Hadoop, Spark;
- Разрабатывать регуляторные отчеты на основании данных из прикладных витрин;
- Подготавливать и выбирать данные для передачи в хранилище;
- Создавать и развивать интеграционные взаимодействия со смежными информационными системами REST/SOAP/S3;
- Реализовывать задачи по импортозамещению технологического стека.
Для нас важно:
- Опыт разработки от 3 лет;
- Высшее образование;
- Стек: Spark, Hadoop (hdfs), Scala;
- Готовы обучать, будет плюсом: Hive, Spark, Airflow.