Инженер данных (Data Engineer)

Дата размещения вакансии: 29.10.2024
Работодатель: Nesco
Уровень зарплаты:
от 160000 до 160000 RUR
Город:
Санкт-Петербург
Партизанская 27
Требуемый опыт работы:
От 1 года до 3 лет

Группа компаний NESCO / JOIA - 29 лет на рынке, крупный дистрибьютор и импортер качественных вин и крепкого алкоголя со всего мира c головным офисом в Санкт-Петербурге, 8 филиалами по России и сетью современных винотек приглашает в команду Инженера данных.

Обязанности:

  • Создание и поддержка единого DWH:
    Построение и обслуживание хранилища данных, обеспечивающего интеграцию данных из разных систем и баз данных (например, 1С, внешние API).
  • Автоматизация ETL/ELT процессов:
    Разработка автоматизированных процессов для сбора, трансформации и нормализации данных с различных источников в DWH. Оптимизация процессов для минимизации временных затрат и ошибок.
  • Контроль качества данных:
    Внедрение системы контроля качества данных, включая разработку средств мониторинга, проверки целостности данных, выявления ошибок и информирования ответственных лиц.
  • Интеграция с API и локальными базами данных:
    Извлечение и интеграция данных по API и из локальных систем, таких как базы данных 1С, для дальнейшей обработки и использования в аналитике.
  • Реализация политики безопасности данных:
    Обеспечение безопасности данных, включая разработку и внедрение механизмов контроля доступа и реализацию политики безопасности.
  • Подготовка данных для машинного обучения:
    Поддержка проектов машинного обучения, обеспечивая доступность качественных и подготовленных данных для разработки и обучения моделей.

Требования:

  • Владение Python (аналитический стек: Pandas, NumPy, и др.) и SQL (Clickhouse, MySQL, PostgreSQL) для написания запросов и обработки данных.
  • Опыт работы с ETL:
    Практический опыт проектирования, разработки и оптимизации ETL-процессов, интеграции данных из множества источников в единое хранилище.
  • Разработка и поддержка DWH:
    Опыт создания и поддержки хранилищ данных для аналитики и отчетности.
  • Работа с системами BI:
    Умение работать с системами бизнес-аналитики (например, Power BI, Tableau) для визуализации данных и создания отчетов.
  • Аналитическое мышление:
    Способность к логическому мышлению, анализу данных и выделению ключевых параметров. Умение находить связи и зависимости между параметрами.
  • Организация и структурирование данных:
    Навыки работы с большими массивами данных, их структурирования и подготовки для различных целей, включая аналитическую отчетность и машинное обучение.

Условия:

  • Официальное оформление согласно ТК РФ, "белая" заработная плата без задержек;
  • График работы 5/2 с 10:00 до 19:00 в нашем комфортабельном и стильном офисе в районе м. Ладожская;
  • Возможность профессионального и карьерного развития;
  • Активная корпоративная жизнь и подарки сотрудникам;
  • Скидки на продукцию компании;
  • Наш корпоративный спорт - волейбол, мы еженедельно играем в него, и с радостью примем Вас в нашу команду!