Дата инженер / Специалист по интеграции данных

Дата размещения вакансии: 24.02.2025
Работодатель: Хайлэнд Голд
Уровень зарплаты:
з/п не указана
Город:
Санкт-Петербург
улица Профессора Попова 37Щ
Требуемый опыт работы:
От 3 до 6 лет

Мы — проектный институт, занимающийся разработкой комплексных технических решений. В нашей экосистеме работает множество внутренних веб-сервисов с уникальными продуктовыми базами данных. Наша цель — создать централизованное, надёжное и эффективное хранилище данных для аналитики и принятия стратегических решений

Задачи, которые предстоит выполнять:

  • Проектирование и реализация процессов сбора данных из распределённых веб-сервисов и БД в единое хранилище
  • Разработка ETL/ELT-процессов с акцентом на эффективность и отказоустойчивость
  • Интеграция разнородных источников данных (SQL, NoSQL, REST API и др.)
  • Оптимизация производительности и мониторинг пайплайнов
  • Обеспечение безопасности, резервирования и восстановления данных
  • Автоматизация процессов, документирование решений
  • Взаимодействие с командами сервисов для согласования форматов и требований

Ищем кандидата, который имеет:

  • Опыт работы с ETL/ELT-инструментами (Apache Airflow, Spark, опционально: NiFi, Talend и т.д.)
  • Глубокие знания SQL и опыт работы с реляционными/нереляционными БД
  • Понимание принципов построения хранилищ данных (Data Warehouse, Data Lake) на Greenplum
  • Навыки программирования на Python, Java
  • Умение работать с API
  • Опыт обеспечения надёжности систем: обработка ошибок, мониторинг (Zabbix, Graylog, Apache Superset, опционально: Prometheus, Grafana), тестирование
  • Знание Linux, Docker, Kubernetes будет преимуществом

Мы предлагаем:

  • Участие в проекте с высокой степенью ответственности и возможностью влиять на архитектуру
  • Современный технологический стек и поддержку профессионального роста
  • Оформление согласно ТК РФ (официальная заработная плата)
  • ДМС, страхование жизни и выезда за рубеж, корпоративные скидки, кафетерий льгот (на выбор)
  • Годовая премия по результатам работы
  • Благодаря инновационному подходу к работе и использованию самых продвинутых технологий, компания получила статус аккредитованной ИТ-компании
  • Здоровая рабочая атмосфера, комфортные условия труда (чай, кофе, фрукты, пинг-понг, кикер, занятия йогой в офисе, участие в спортивных мероприятиях)
  • Пятидневная рабочая неделя, гибкое начало рабочего дня с 8.00 до 10.00

Мы команда единомышленников, активно внедряющая инновации и достижения мирового опыта в процесс проектирования. Работа у нас — это стабильность и возможность профессионального развития и карьерного роста