Data engineer

Дата размещения вакансии: 29.11.2024
Работодатель: ИК СИБИНТЕК
Уровень зарплаты:
з/п не указана
Город:
Москва
Беговая улица 3с1
Требуемый опыт работы:
От 3 до 6 лет

Обязанности:

  • Участие в разработке фреймворков для генерации и регламентации EL/ETL процессов на базе Airflow, Clickhouse и SQLmesh
  • Интеграция фреймворков с компонентами платформы
  • Разработка коннекторов к источникам данных
  • Разработка интерфейсов создания и управления процессами

Требования:

  • Уверенное владение SQL: базовый, синтаксис, трансакции, представления, хранимые процедуры
  • Владение Python 3: multithreading и multiprocessing, модули pandas, pyodbs/sqlachemy, boto3, paramiko, requests
  • Опыт работы с оркестраторами процессов: Airflow, NiFi, Jenkins
  • Опыт интеграции с различными источниками данных: SQL/NoSQL, API, файловые системы
  • Базовые навыки использования Linux

Условия:

  • Оформление по ТК в аккредитованную ИТ-компанию

  • Формат работы: удалённый или гибрид (офис в нескольких минутах ходьбы от метро Беговая)

  • Конкурентная заработная плата (обсуждается индивидуально: в зависимости от опыта, хард скиллов и выбранной позиции)

  • ДМС со стоматологией с первых недель работы