Старший инженер данных в VK

Задачи

• Проектирование архитектуры и разработка пайплайна обработки геоданных
• Поддержка, развитие и оптимизация существующей кодовой базы
• Оценка трудозатрат
• Код ревью
• Написание unit-тестов

Требования

• Отличное знание Python
• Опыт работы c Git
• Опыт реализации сложных SQL-запросов (PostgreSQL, PostGIS)
• Опыт реализации сложных пайплайнов обработки данных (ETL)
• Опыт проектирования БД

Будет плюсом

• Опыт работы с очередями Kafka
• Опыт работы с платформами обработки данных, такими как Apache Airflow
• Опыт работы с Lua
• Опыт работы с OpenStreetMap