Инженер сопровождения

SberData строит централизованное хранилище данных, объем которого уже превышает 100 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI. SDP Hadoop - это полноценный дистрибутив на базе Apache Hadoop, адаптированный для внутреннего использования, предназначенный для хранения и обработки слабоструктурированных и неструктурированных данных. Стек технологий: Linux (RHEL), Hadoop (Hive, YARN, Oozie) RH IDM IPA (LDAP, IDM, CA, DNS, HBAC, SUDO), PostgreSQL + Patroni, Apache Ozone, Kafka, HAProxy, NGinx, Grafana + Prometheus, Ansible, Jenkins, Vault (hashicorp), Git, Bash, Python.

Задачи

• установка, настройка, обновление кластеров SDP Hadoop и связанной инфраструктуры
• участие в проектировании продукта SDP Hadoop со стороны сопровождения: написание ТЗ, описание и воспроизведение Дефектов
• автоматизация рутинных операций для повышения производительности и надежности систем (самостоятельно и с привлечением смежных команд, выставление ТЗ на контрагентов)
• анализ и оперативное устранение нештатных ситуаций, отказов приложений, а также исследование корневых причин их возникновения
• поддержка и совершенствование процессов CI/CD, релизного процесса, обеспечивая эффективную разработку и доставку
• создание эксплуатационной документации для сопровождаемых систем
• организация работ, взаимодействие со смежными командами, исправления выявленных недостатков.

Требования

• глубокие знания в troubleshooting'е и администрировании linux-систем, уверенное владение командами ОС семейства Linux
• написание различных SQL запросов, понимание что такое DML, DDL, DCL, TCL, знание принципов работы реляционных БД
• понимание работы стека TCP/IP
• опыт эксплуатации CI/CD систем (Jenkins/Github/TeamCity/etc) и с системами мониторинга (Prometheus, Zabbix)
• понимание технологий интеграции между системами (форматы сообщений xml, json, менеджеры очередей Kafka, RabbitMQ, IBM MQ, ActiveMQ)
• опыт автоматизации на скриптовых языках (shell/perl/python/etc)
• опыт работы с централизованными системами по управлению идентификацией пользователей (RH IDM IPA, Active Directory), понимание принципов работы Kerberos, LDAP
• знание ITSM, ITIL и опыт написания технической документации и технических заданий.

Будет плюсом

• опыт в администрировании и troubleshooting'e Hadoop, а именно Hive, YARN, Oozie, Zookeper, Hue, Ambari, HBASE, Spark, HDFS, Druid, Flume, Solr, Ranger
• английский язык на уровне чтения технической документации
• техническое образование.

Условия

• офисный формат работы по адресу г Москва, наб Новоданиловская (БЦ Даниловский Форт, ДФ), 10
• график: 5/2
• ежегодный пересмотр зарплаты и годовая премия
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• программа адаптации и помощь руководителя на старте
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• подписка Прайм с возможностью совместного использования на трёх близких
• вознаграждение за рекомендацию друзей в команду Сбера.