Data Engineer / Databricks Engineer

О нас:

Мы — Upside Analytics, консалтинговая компания в области аналитики, которая предоставляет высокоэффективные аналитические решения для глобальных финансовых клиентов.

Наша команда работает с банками, хедж-фондами и управляющими активами, помогая им строить надежные аналитические платформы, data pipelines и reporting-ready data layers для финансовой, риск- и управленческой отчетности.

Сейчас мы ищем Data Engineer / Databricks Engineer на банковский проект. Роль подойдет специалисту, который умеет не просто писать ETL-пайплайны, а строить production-grade data pipelines, работать с финансовыми данными и готовить качественные слои данных для аналитики и BI.

Чем предстоит заниматься:

• Разрабатывать и поддерживать data pipelines в Databricks.
• Работать с большими объемами финансовых и банковских данных.
• Строить и поддерживать data layers по подходу Bronze / Silver / Gold.
• Разрабатывать transformation logic с использованием PySpark / SQL.
• Создавать reporting-ready data marts для дальнейшего использования в аналитике и Power BI.
• Проектировать структуры данных: fact/dimension tables, star schema, аналитические витрины.
• Настраивать проверки качества данных: reconciliation, validation, duplicate checks, null checks, freshness checks.
• Работать с ошибками в данных и находить причины расхождений в отчетности.
• Оптимизировать Spark jobs и SQL-запросы.
• Участвовать в code review, поддерживать Git-based development process.
• Взаимодействовать с BI-командой, аналитиками и клиентской стороной.
• Документировать логику трансформаций, структуру данных и ключевые зависимости.

Что мы ожидаем:

• Опыт в Data Engineering от 3 лет.
• Практический опыт работы с Databricks.
• Уверенное знание PySpark.
• Сильный SQL: joins, CTE, window functions, analytical queries, query optimization.
• Опыт построения production-grade ETL/ELT pipelines.
• Понимание Lakehouse architecture и подхода Bronze / Silver / Gold.
• Опыт работы с Delta Lake / Delta Tables.
• Понимание data modeling для аналитики: facts, dimensions, star schema.
• Опыт с data quality checks и validation logic.
• Умение работать с Git.
• Понимание влияния data engineering изменений на downstream reporting / BI.
• Английский язык — желательно от B2+, так как проект связан с международным клиентом.

Будет большим плюсом:

• Опыт в банковской сфере, financial services, risk, treasury, finance, P&L или regulatory reporting.
• Опыт с Unity Catalog.
• Опыт с dbt / dbt on Databricks.
• Опыт с Azure Data Lake / Azure Data Factory / Azure DevOps.
• Опыт с CI/CD для data projects.
• Опыт с orchestration: Databricks Workflows, Airflow, ADF.
• Понимание Power BI, semantic models и требований к данным для BI-отчетности.
• Опыт работы с sensitive data, access control, auditability, data lineage.

Условия:

• Работа в Алматы.
• Формат: удаленно / гибрид — обсуждается.
• Участие в крупном банковском проекте.
• Работа с международным финансовым клиентом.
• Возможность развиваться в Databricks, data engineering, banking analytics и BI-platform engineering.
• Сильная команда с опытом работы над аналитическими решениями для глобальных финансовых компаний.
• Зарплата обсуждается индивидуально по итогам интервью и зависит от уровня кандидата.