Ведущий Data Engineer

Дата размещения вакансии: 17.06.2024
Работодатель: AUXO (Атос АйТи Солюшенс энд Сервисез)
Уровень зарплаты:
з/п не указана
Город:
Санкт-Петербург
Требуемый опыт работы:
От 3 до 6 лет
Обязанности:
  • Участие в проектах и pre-sale компании;
  • Формирование экспертизы, прототипирование перспективных инструментов Data-инженерии;
  • Проектирование и разработка ETL/ELT пайплайнов;
  • Выполнение тестирования по разработанным сценариям и сопровождение пользователей в процессе тестирования;
  • Менторинг младших специалистов.
Требования:
  • Опыт работы на позиции Data Engineer (ETL-разработчик) — от 3-х лет с различными ETL средствами и оркестраторами (AirFlow, dbt, SAS DIS, Informatica, SSIS и др.);
  • Опыт работы с SQL на экспертном уровне — аналитические функции, подзапросы, хранимые процедуры, оптимизация запросов;
  • Понимание работы различных СУБД (SQL/NoSQL, OLTP/OLAP, MPP) и современной IT-инфраструктуры (контейнеризация, Infrastructure as code, облачные технологии);
  • Опыт работы с Big Data стеком (Hadoop, Hive, Impala, Spark, NiFi, Sqoop, Hue и пр.);
  • Умение работать в распределенных командах по методологии Agile/Scrum;
  • Английский, достаточный для ведения деловой переписки и чтения документации;
  • Умение работать со средствами коллективной работы Svn, Git, Jira, Wiki.

​​​​​​​​​​​​​​Будет плюсом:

  • Опыт работы с ClickHouse, GreenPlum;
  • Владение Scala, Java, Python;
  • Опыт работы с Kafka и построение потоковых пайплайнов;
  • Опыт работы с распространенными инструментами BI: Qlik / Power BI / Tableau / Superset и др.;
  • Знание Linux/Unix, опыт работы со скриптами shell;
  • Опыт работы со стеком ArenaData.
Условия:
  • Оформление в штат (Full Time), ДМС, соц. пакет;

  • Аккредитованная IT-компания;
  • Работа над масштабными проектами, преобразующими отрасли российской экономики в уютной IT-компании;

  • Возможность работать удаленно с готовностью работать по Московскому времени.