Data Engineer

Дата размещения вакансии: 18.11.2024
Работодатель: Employcity
Уровень зарплаты:
з/п не указана
Город:
Москва
Требуемый опыт работы:
От 1 года до 3 лет

Международная компания, которая разрабатывает надежные и актуальные IT-решения для b2c и b2b сегмента развлекательной, игровой и спортивной тематики находится в поиске опытного Data engineer! Команда разработки решений для маркетологов компании ищет опытного дата инженера для создания хранилища данных в рамках внутреннего технологического продукта.

Чем предстоит заниматься:

  • Участие в проектировании и выстраивание (совместно с DevOps) с 0 платформы данных в компании;
  • Разработка, тестирование и документация ETL процессов с основными источниками данных;
  • Проектирование и разработка DWH;
  • Активно развивать Data Quality и Governance направление. Автоматизация проверок качества данных;
  • Формирование системы мониторинга целостности и качества данных.

Какие навыки нужны:

  • Опыт работы дата инженером от 2х лет;

  • Опыт и понимание принципов проектирования архитектуры хранилища данных (Kimball, Medallion, OBT);

  • Опыт разработки и организации ETL на Python (опыт работы и поддержки Dagster, Prefect, Airflow - как преимущество);

  • Опыт работы с Docker, Kubernetes;

  • Актуальные знания или желание разобраться в релевантных open source решениях - Apache Iceberg, Delta Lake, Trino и другие;

  • Свободный SQL и продвинутый уровень владения Python.

Плюсом будет:

  • Практический опыт работы с dbt;

  • Практический опыт работы с Data Lake / Lakehouse на базе s3 Minio + Apache Iceberg / Delta + Trino (или аналоги);

  • Глубокое понимание архитектуры и принципов работы Clickhouse.

Что компания может предложить Вам:

  • Возможность развивать свои компетенции и применять знания на практике;
  • Компания заинтересована в развитии своих сотрудников: готовы привлекать наставников и оплачивать курсы для повышения квалификации;
  • Отсутствие бюрократии, быстрое согласование необходимых вещей;
  • Удаленный формат работы;
  • Предоставляется 4 day-off в год за счет компании;
  • Английский язык или психолог на выбор (частичная компенсация);
  • Компенсация спортзала;
  • ДМС после испытательного срока;
  • Компания поддерживает сотрудника в важные периоды жизни;
  • Премия в виде 13-ой зарплаты по итогам работы за год;
  • Индексация заработной платы раз в год по результатам работы.