Data инженер (Senior), ритейл

• Анализировать требования аналитиков и архитекторов для проектирования низкоуровневой архитектуры систем обработки больших данных.
• Документировать спроектированную низкоуровневую архитектуру систем больших данных.
• Разрабатывать систему обработки больших данных согласно утвержденной архитектуре.
• Подготавливать документацию, описывающую алгоритмы разработанных систем больших данных.
• Писать модульные тесты (Unit) для проверки качества и работоспособности разработанного программного кода.
• Выполнять регулярные мероприятия по повышению производительности и эффективности программного кода систем обработки больших данных.
• Устранять выявленные дефекты и баги в функционировании разработанных приложений.
• Подготавливать и выпускать обновления, включающих в себя исправление дефектов и оптимизацию программного кода систем больших данных.

Для нас важно:

• Опыт от 4-х лет коммерческой разработки и от 2-х лет - разработка систем, которые вышли в промышленную эксплуатацию.
• Опыт от 2-х лет с BigData.
• Опыт и знание стека Python 3.5+, Spark 2.2+, Hadoop, Hive, Airflow, Kubernetes (K8S), SQLAlchemy, PostgreSQL, Greenplum, PyTest, Unittest, Flake8, PyLint, Black, Docker, Git, GitLab, CI/CD, Shell, Linux.
• Опыт работы с бизнес требованиями (сбор, формирование требований, анализ), опыт работы в условиях постоянно меняющихся требований.
• Опыт написания программ распределенных вычислений (Spark) и ETL процессов.
• Опыт проведения Code Review.
• Опыт/понимание разработки и проектирования архитектуры БД, создание и манипуляции с БД.
• Опыт оптимизации запросов.
• Понимание процессов CI/CD.

Главный принцип SkillStaff - Выбирай!

• РАЗНООБРАЗИЕ ПРОЕКТОВ. Выбирай из сотен компаний и проектов то, что интересно и полезно для твоего роста. SkillStaff помогает реализовывать ежегодно порядка 500 различных ИТ-проектов для крупного бизнеса.
• КОМФОРТ. SkillStaff — аккредитованная IT-компания, белая зарплата и удобный график работы. Создавай идеальные условия для своей работы: удаленная работа или возможность работать как в офисе клиента, так и в комфортном офисе SkillStaff в центре Москвы на Воздвиженке.
• РАЗВИТИЕ. Выбирай сам путь, по которому ты хочешь развиваться. Используй возможность обмена опытом и получение знаний через участие в разных проектах, совместную работу с высококвалифицированными коллегами.
• КУЛЬТУРА. Нашу культуру создают сами сотрудники – мы их слышим и помогаем развиваться, чтобы #вместе переходить на новый уровень!