Обязанности:
Разработка ETL интеграций спроса для переезда в hadoop 3
- Самостоятельная разработка, реализация и поддержка интеграционных решений, на стеке технологий, принятых в команде. (Java, Groovy, Apache Nifi, Airflow);
- Определение стека технологий для конкретных проектов и задач.
- Решает технически сложные задачи, которые другие инженеры в команде не в состоянии решить.
- Оперативное реагирование на информацию о проблемах в зоне ответственности, выполнение задач в установленный срок.
- Разработка и контроль актуальности документации взаимодействия конфигурационных единиц платформы больших данных.
- Предоставление отчетности о своей деятельности начальнику отдела/ руководителю в порядке, установленном руководством.
- Контроль за качеством интеграционных решений, с последующим заведением задач\дефектов на рефакторинг.
- Определяет технологическую стратегию развития проекта или продукта, работает на перспективу.
-Выстраивает процессы (например, CI/CD, код ревью), внедряет и развивает инженерные практики.
Требования:
- Владение одним из языков программирования (Java, Groovy), знание принципов ООП, умение читать чужой код.
- Сборка проекта, компиляция и деплой в Rancher. (Docker).
- Опыт проектирования, реализации, развития и поддержки интеграционных решений на стеке технологий BigData.
- Знание SQL (индексы, функции, умение читать планы запросов, оптимизация запросов). - Опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.).
-Умение работать с Git в консоли.
- Знания специфики работы ETL инструментов (Apache Nifi, Airflow, интеграционные шины SAP BW, Talend, Informatica, SAS и т.п.).
- Опыт работы с Hadoop.
- Понимание устройства HDFS, форматов данных.
- Опыт работы с Hive или любым другим хранилищем на основе Hadoop.
- Опыт использования системами ведения проектов и документации.
- Умение работы с архитектурными схемами.
- Понимание принципов построения и хранения данных
- DWH и DataLake.
- Желателен опыт администрирования Unix/Linux или Hadoop (HDFS , Yarn, Ranger , Spark, Zookeeper), Zabbix, Ansible.
Условия:
-
Можно с уверенностью сказать, что наша компания является уникальной благодаря тому, что ставит заботу о своих сотрудниках в приоритет, команда считается основной ценностью для нас.
-
Мы предоставим тебе возможность развиваться. Оплатим внешние курсы, дадим доступ к неограниченному количеству обучающих материалов. Ты получишь возможность выступать на конференциях, проводить обучения (при твоем желании, конечно), участвовать в митапах и вебинарах. Хотим развивать экспертность каждого сотрудника.
-
Мы считаем, что наряду с развитием интеллектуальным, здорово, когда человек уделяет время и физической форме, поэтому предоставляем возможность занятий спортом вместе с компанией. У нас есть собственные спортивные и киберспортивные команды)). Будем рады видеть тебя в одной из них).
-
Вся наша команда работает удаленно, поэтому вам не придется тратить силы на дорогу до офиса. Хотя он у нас есть, и, возможно, мы встретимся там на одном из корпоративных мероприятий, которые у нас проходят часто как и многие другие полезные события.
-
Конечно мы предлагаем уже классическую базу, оформление по ТК РФ и его полное соблюдение (оплачиваемые отпуска, больничные), бонусы работы в аккредитованной IT-компании. Оплачиваем переработки, если они случаются, но стараемся их не допускать:).
-
Мы обучаем, мотивируем и вдохновляем, помогаем в решении любых личных вопросов. Активно развиваем soft skills и современные техники коммуникации. Эффективно действуем в онлайне и не привязываемся к геолокации.
-
Уверенно развиваем внутреннюю экспертизу и смотрим в будущее! А также многое другое, расскажем при знакомстве!
Спасибо, что ты дочитал до конца!) Если вдруг эта вакансия тебе не подходит, обрати внимание на остальные в нашем профиле, у нас сильно больше вариаций чем одна).
