Инженер сопровождения и администрирования DWH-платформ

Мы развиваем и сопровождаем корпоративную DWH-платформу: Greenplum, ClickHouse, Airflow, NiFi, Superset/Tableau, CI/CD и инфраструктурные сервисы вокруг отчетности и загрузок данных.

Сейчас платформа проходит трансформацию: исторический контур на MSSQL еще будет жить несколько лет, а новые решения постепенно переезжают на Greenplum, ClickHouse и сервисы современной платформы данных.

Чем предстоит заниматься:

• Сопровождать prod и тест-контуры DWH-платформы;
• Поддерживать действующий MSSQL-контур хранилища в переходный период;
• Администрировать и сопровождать Greenplum/PostgreSQL и ClickHouse: схемы, роли, доступы, резервное копирование, диагностика производительности;
• Разбирать инциденты: ошибки загрузок, проблемы с ресурсами, доступами и обновлениями отчетности;
• Поддерживать Airflow и NiFi: настройка подключений, тюнинг производительности, диагностика проблем;
• Сопровождать BI решения Superset/Tableau: доступы, подключения, обновления отчетов, ошибки обновлений и интеграцию с DWH;
• Участвовать в релизном процессе компонентов платформы и проверках после обновлений;
• Настраивать мониторинг, оповещения, метрики, контроль емкости и участвовать в описании базовых регламентов сопровождения;
• Снижать ручную операционную нагрузку через автоматизацию, скрипты и стандартизацию процессов;
• Взаимодействовать с аналитиками, разработчиками, администраторами и командами информационной безопасности.

Наши пожелания к кандидатам:

• Опыт сопровождения DWH, аналитических БД или платформ данных;
• Уверенный SQL и понимание устройства реляционных БД;
• Опыт с MSSQL, Greenplum, PostgreSQL;
• Практический опыт Linux: процессы, диски, логи, права, systemd/cron, диагностика ресурсов;
• Опыт с Airflow или похожим оркестратором;
• Понимание доступов, ролей, сервисных учетных записей, RBAC и аудита прав;
• Понимание Git, CI/CD и Docker на уровне эксплуатации и диагностики;
• Умение читать логи, локализовать проблему и доводить инцидент до причины;
• Готовность работать с высоким потоком обращений и параллельно улучшать процессы сопровождения;
• Опыт применения ИИ-ассистентов в ежедневной работе: анализ логов и ошибок, написание и ревью SQL/скриптов (Python, Bash), составление документации;
• Понимание ограничений LLM: галлюцинации, проверка сгенерированного кода перед применением в проде, недопустимость передачи чувствительных данных во внешние сервисы.

Будет плюсом:

• ClickHouse в prod эксплуатации;
• NiFi и Kafka;
• Superset/Tableau: администрирование, доступы, подключения;
• Опыт миграции с MSSQL на PostgreSQL/Greenplum/ClickHouse или участие в похожей трансформации DWH;
• Grafana - дашборды, алерты, метрики;
• Python или Bash для автоматизации операционных задач;
• Базовое понимание Kubernetes;
• Опыт построения регламентов сопровождения, инструкций и постинцидентных разборов.

Мы предлагаем:

• Доступ к современным AI-инструментам;

• Работу в стабильной и активно развивающейся компании – лидере инвестиционного рынка;

• Современный стек технологий, амбициозные проекты, возможность профессионального развития;

• Гибридный или удаленный режим работы;

• Работу в аккредитованной Минцифры России ИТ-компании, резиденте Сколково;

• ДМС с первого месяца работы.