DevOps-инженер

Дата размещения вакансии: 17.09.2024
Работодатель: АЙТИ.СПЕЙС
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 3 до 6 лет

Мы – АйтиСпейс, международная аккредитованная IT-компания, занимается разработкой, внедрением и сопровождением ПО.

Наши клиенты – высокотехнологичные лидеры своих отраслей, по направлениям: ритейл, финтех, страхование и другие.

Наша команда – это профессионалы своего дела, работающие по современным методикам и в дружелюбной атмосфере.

Сейчас мы ищем опытного DevOps-инженера для работы на проекте российской компании, специализирующаяся на решениях в области анализа и обработки данных, включая технологии больших данных (big data), машинное обучение и аналитические системы.

Ищем на проект по разработке программно-аппаратного комплекса (внутренний проект).

Что мы предлагаем:

  • Полную занятость со стабильными выплатами.
  • Оплату труда, соответствующую навыкам и ожиданиям.
  • Полностью удаленный формат работы.
  • Стабильный график 5/2 с гибким началом рабочего дня.
  • Возможность оформления по ТК РФ/ИП.
  • Профессиональное развитие.
  • Налаженную систему онбординга, помощь и поддержку во время всего периода работы.
  • Яркую корпоративную жизнь – онлайн и оффлайн мероприятия.
  • Индивидуальные бонусы/Система дополнительных бонусов (спортзал, техника и пр.) для тех, кто прошёл испытательный срок.
  • Реферальную программу «приведи друга – получи бонус» от 50 000р до 70 000р.

    С какими задачами предстоит работать:

    Spark:

  • Развертывание, настройка кластеров Spark и управление им.
  • Оптимизация производительности кластера и использования ресурсов.
  • Общение с командой разработки ML.
  • Внедрение решений для мониторинга и ведения логов для кластера Spark.
  • Оптимизации Spark и настройки производительности.

    API Gateway:

  • Установка и настройка API Gateway (например, NGINX, Kong, Apigee).
  • Настройка маршрутизации, балансировки нагрузки и управления API.
  • Развертывание БД:
  • Развертывание и настройка реляционных (например, PostgreSQL, MySQL) или NoSQL баз данных (например, MongoDB, Cassandra).
  • Обеспечение резервного копирования, восстановления и репликации данных.

    Kafka:

  • Установка и настройка Apache Kafka.
  • Настройка кластеров Kafka, брокеров, тем и клиентов.
  • Обеспечение отказоустойчивости и мониторинга Kafka.
  • Модули мониторинга и логирования:

  • Внедрение и настройка инструментов мониторинга (например, Prometheus, Grafana, ELK Stack).
  • Настройка алертинга и мониторинга производительности систем и приложений.

Что мы ожидаем:

  • Опыт развертывания и управления кластерами Spark.
  • Уверенные знания одного из менеджеров кластеров Spark (YARN, Mesos).
  • Автоматизация процесса развертывания и оптимизация CI/CD.
  • Знание одного из инструментов создания сценариев и автоматизации (Ansible, Terraform, Jenkins).
  • Опыт работы с технологиями контейнеризации (Docker, Kubernetes).
  • Опыт работы в Agile/Scrum командах.
  • Способность решать сложные технические задачи и быстро осваивать новые технологии.
  • Понимание принципов сетевой безопасности и лучших практик.

Будет круто, если, у Вас есть:

  • Опыт работы с PySpark, Scala.
  • Опыт работы в области инфраструктуры ML и инженерии данных.
  • Опыт работы с Kafka.
  • Опыт работы с GraphQL.
  • Знание Postgres, SQL.
  • Опыт работы с Liquibase.
  • Понимание параллельной и распределенной обработки данных.
  • Умение писать поддерживаемый код