Data Engineer (Due Diligence)

Ищем инженера по Дата-инженера в команду Due Diligence: анализ финансовой активности клиентов банка (юридические лица) в рамках кредитования, мониторинга, оценки рисков и других процессов банка.

Работа команды позволяет выявлять негативные факторы деятельности компаний заемщиков в процессе кредитования. Результат нашей работы улучшает процесс для сотрудников Банка.

Преимущественно, обработка больших данных и разработка витрин данных на Spark (Scala) с использованием pySpark.

Базы данных PostgreSQL.

Код храним в Bitbucket, DevOps трубы создаем на Jenkins.

Обязанности:

• анализ бизнес требований на разработку витрин
• разработка промышленных витрин данных c использованием Hive, Spark и вывод их в ПРОМ.

Требования:

• опыт работы в области Data Engineer от одного года
• знание SQL – продвинутый уровень (запросы, Join`ы, агрегаты, группировки, вложенные запросы)
• знание python: стандартные структуры данных (dict, list, set, модуль collections), pandas, numpy, h5py
• опыт работы с Hadoop (Hive, Spark, HBase) является плюсом
• знание Git
• опыт разработки витрин данных и выстраивания логического слоя данных
• опыт работы с обработкой больших массивов данных
• опыта по выводу витрин в промышленную эксплуатацию (подготовка документации, сопровождение процесса).

Инструменты BigData:

• Hadoop (Hive, Spark, Kafka, Oozie)
• языки программирования (Scala, Python, Java)
• инструменты DevOps (Git, Nexus, Jenkins).
• условия.

Условия:

• офис в шаговой доступности от метро Кутузовская, отсутствие дресс-кода
• никакой бюрократии, все не связанные с разработкой задачи выполняют выделенные роли в команде
• полная свобода действий, важен результат
• команда опытных инженеров
• регулярное обучение hard и soft скиллам в нашем корпоративном университете
• ДМС, страхование жизни, скидки для сотрудников, льготная ипотека от Сбербанка
• регулярный пересмотр заработной платы в зависимости от результатов
• бесплатный фитнес и тренажерный зал.