Нижний Новгород
Обязанности:
-
разрабатывать ETL процессы на Spark. В работе много сложного SQL кода. Некоторые задачи — настоящий вызов для тех, кто умеет оперировать множествами
-
Использовать Scala и Java там, где нельзя решить задачу на Spark SQL
-
разрабатывать workflow на Apache Airflow
-
использовать в разработке Scrum и Agile
Мы:
- любим хорошо написанный код и организацию процессов разработки таким образом, чтобы стимулировать использование элегантных решений
- используем платформы совместной разработки, сборки, тестирования, создания и документирования релизов
- поддерживаем и сопровождаем свои разработки
Требования:
-
высшее техническое образование
-
хорошее знание SQL
-
опыт программирования Python или Java/Scala
-
английский на уровне чтения технической литературы
-
знакомство с Linux
Плюсом будет:
- опыт работы со стеком Hadoop
- знание Spark