Вместе с нами тебе предстоит:
-
разрабатывать типовые потоки в IPC и IDQ;
-
создавать Python скрипты для загрузки данных;
-
оптимизировать SQL запрос;
-
писать процедуры на языке PGPLSQL;
-
мониторить корректность сборки витрин данных;
-
настраивать нотификации из БД по подготовленным сценариям;
-
сопровождать и развивать БД ArenaData DB; (не критично владение ArenaData DB , но если не работали, важно понимание работы БД- оптимизация, хранение данных, архитектурные особенности,MPP, объекты БД. Если не работали с ArenaData, желаетелен опыт с Greenplam или PostgresQL)
-
взаимодействовать с другими участниками команды по выводу доработок.
Какие знания и навыки для нас важны:
-
опыт работы разработчиком на проектах формирования/доработки хранилищ/витрин данных от 3 лет;
-
разработка ETL-решений с использованием инструментов Informatica PC/DQ или аналогичного;
-
отличное знание SQL;
-
понимание архитектуры БД (Greenplum/Arenadata DB/PostgreSQL);
-
Навыки написания кода на Python (уровень от джун+ и выше).
-
Желателен опыт анализа производительности и оптимизации разрабатываемых процессов, потоков данных, запросов.
Будет плюсом:
-
знание Airflow;
-
написание технической документации; (основная часть написана, периодически вносим правки)
-
настройка интеграции с источниками данных (делаем примерно раз в квартал)