Москва
Вместе с нами ты будешь:
- заниматься подготовка и загрузка исходных данных. Источник данных Kafka.
- Оптимизацией процессов загрузки данных и формирование истории SCD2.
- реализация потоков загрузки данных на Airflow.
- взаимодействие аналитиком и заказчиком. Контроль качества, ревью кода.
Какие знания и навыки для нас важны:
- опыт работы с реляционными базами данных и опыт написания сложных SQL запросов (Postgresql, Oracle)
- умение проектировать и реализовывать процедуры и функции (Postgresql - PL/pgSQL, Oracle - PL/SQL)
- умение оптимизировать сложные SQL-запросы (план запроса, индексы, партиции и т.д);
- опыт работы с Python (базовые библиотеки)
- опыт работы с Airflow
- понимание принципов работы с Kafka.
- понимание принципов построения корпоративных хранилищ данных;
- опыт владение любым ETL-инструментом;
- опыт работы с большими, нагруженными системами;
- опыт работы с GIT / Jira / Confluence;