з/п не указана
Москва
От 1 года до 3 лет
Разрабатываем и внедряем передовые методы мультимодальной генерации. Используются следующие модальности – на входе изображения/текст/звук/видео, на выходе – видео/звук. Фокус — разработка новых архитектрур, обучение больших моделей(десятки/сотни миллиардов параметров), оптимизация и удешевление инференса.
Обязанности
- Исследование и разработка новых методов мультимодальной генерации (исследование существующих архитектур и разработка новых).
- Исследование и разработка методов генерации image to video, first-last frame to video, video continuation. Оптимизация пайплайна обучения и инференса – сбор датасета, разработка архитектуры модели, обучение, оценка, оптимизация скорости инференса и стоимости генерации.
- Исследование и разработка методов генерации text(image) to video+audio, Оптимизация пайплайна обучения и инференса – сбор датасета, разработка архитектуры модели, обучение, оценка, оптимизация сокрости инференса и стоимости генерации.
- Совместная работа с командами опенсорса и продуктовой в целях стабильного и быстрого инференса моделей в разных средах и на разных поверхностях – GigaChat/ComfyUI/diffusers etc
- Техническое описание разработанных решений – статьи, документирование, техрепорт
Требования
- Экспертный уровень Python, PyTorch.
- Опыт разработки моделей аудио/видеогенерации.
- Глубокое понимание методов обучения/распределенного обучения.
- Понимание архитектур современных LLM и Diffusion-моделей.
- Опыт работы с диффузионными моделями.
Бонус: Опыт в классических задачах аудио/видео обработки. Цифровая обработка сигналов/компрессия/шумоподавление.
Условия
- комфортный современный офис рядом с м. Кутузовская
- формат работы гибрид
- ежегодный пересмотр зарплаты, квартальная и годовая премия
- корпоративный спортзал и зоны отдыха
- более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- программа адаптации и помощь руководителя на старте
- расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- ипотека выгоднее до 7% для каждого сотрудника
- бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
- вознаграждение за рекомендацию друзей в команду Сбера
