Описание проекта
Наша команда создает информационную платформу для решения аналитических и исследовательских задач в области создания продуктов и услуг на мировых финансовых рынках: торговля валютой, ценными бумагами, производными финансовыми инструментами.
Этот бизнес потребляет и порождает огромное количество данных, которые должны обрабатываться c целью:
∙ Разработки витрин данных и моделей машинного обучения
∙ Поддержки регулярных бизнес-операций
∙ Проведения Ad hoc анализа
∙ Подготовки регулярной аналитической и управленческой отчетности
Разрабатываемая нами информационная платформа – высоконагруженное решение, призванное обеспечить достижение всех этих целей.
Основные задачи сотрудника на данной позиции
- Системная разработка, поддержка и оптимизация ETL-процессов и ML-моделей (MLOps) на платформах Greenplum и Hadoop
- R&D, реализация пилотов по выбору технологий и решений
- Поддержание технической документации в актуальном состоянии
Обязательные навыки
- Опыт разработки на Python от 2х лет
- Опыт работы (администрирования) с популярными РСУБД, в том числе, средствами Python (Greenplum, Teradata, Oracle, MSSQL)
- Уверенное знание SQL
- Опыт работы с экосистемой Hadoop (Spark, HDFS, Hive, Oozie)
Желательные навыки
- Понимание основ облачных технологий и технологий виртуализации и контейнеризации (Kubernetes, Openshift, Docker)
- Опыт работы с CI/CD решениями на базе Jenkins и Bitbucket/Git
- Практический опыт с автоматизацией развертывания ПО
- Знание основ администрирования ОС Linux
- Создание моделей машинного обучения, прохождение курсов по машинному обучению
- Знание специфики python для ml: библиотеки (catboost, lightgbm e t.c.), понимание как обучать и оптимизировать модели
Условия
- Официальное трудоустройство в штат на бессрочный трудовой договор в аккредитованную IT-компанию
- Современный подход к обучению и развитию сотрудников
- Стабильный доход, который обсуждается индивидуально
- ДМС со стоматологией для сотрудников, возможность подключить родственников к программе ДМС, обучение и сертификация, скидки на курсы, фитнес и многое другое