Senior Data Engineer

Дата размещения вакансии: 21.09.2024
Работодатель: Вовнянко Олеся Викторовна
Уровень зарплаты:
от 3500 до 5500 RUR
Город:
Москва
Требуемый опыт работы:
От 3 до 6 лет

Международная компания в сфере iGaming ищет в свою команду Senior Data Engineer.

Основные задачи:
• Разработка и оптимизация архитектуры облачного хранилища данных (Data Lake + Data Warehouse)
• Написание ETL/ELT пайплайнов обработки данных
• Создание и поддержка витрин данных
• Развитие инструментов контроля и поддержания качества данных (data quality / data governance)
Что мы ждем:
• Отличные знания SQL: оптимизация запросов, понимание планов запроса, внутренней работы SQL (оптимизация запросов, join, типы индексов и тд)
• Уверенное знание Python: написание API (Django, fastAPI), алерт-ботов, небольших скриптов и сервисов
• Понимание ETL-оркестраторов: Airflow, Dagster (dbt)
• Понимание концепции (звезда, Data Mesh, Data Vault) хранилищ данных (DWH, Data Lake): слои, витрины, агрегаты, Data Quality
• Знание инфраструктурных инструментов: Docker, bash, git, CI/CD, kubernetes, grafana, sentry
• Опыт работы с clickhouse
необязательно, но хорошо если:
• Работал с s3, spark
• Есть навык писать сервисы с нуля
• Есть опыт проектирование архитектуры DWH

Условия:

  • Remote;
  • Конкурентная зарплата;
  • Интересные задачи;
  • Быстрорастущая компания;

Направляйте ваше резюме и мы с вами обязательно свяжемся и обсудим все детали.