з/п не указана
Москва
От 1 года до 3 лет
Чем предстоит заниматься:
- отслеживанием в приложениях и в кубере за выполнением заданий, своевременно реагировать на падения;
- своевременным обновлением секретов, доступов;
- разработкой низкоуровневых темплейтов - управлением ресурсами запускаемых задач, оптимизацией расписания;
- разработкой ci/cd пайплайнов;
- доработкой и сопровождением flink, kafka;
- управлением scaling'om - динамическим распределением ресурсов в кубернетес и прочими разрешениями, для сетевых и вычислительных ресурсов;
- подключением новых источников к dbt, omd;
- настройкой среды разработки dbt models и openmetadata validators, консультированием по разработке omd валидаторов и dbt моделей;
- разработкой высоконагруженных источников, с которыми перестал справляться airflow - на базе низкоуровневого сервиса datahub.
Чего мы ждем от тебя:
- хорошие навыки в командной строке кубер, helm, docker - cобираем всё с нуля (from scratch) в контуре ci/cd;
- желательно профессиональный бекграунд в datascience и/или дата инженер.
