з/п не указана
Москва
Более 6 лет
Обязанности
- разработка агентов и навыков (Skills). Промпт- и контекст-инжиниринг, проектирование механик решения сложных задач. Примеры реальных задач:
– поиск аналогов оборудования в справочнике на 500 000 строк;
– создание приказа по корпоративному шаблону;
– глубокие исследования в интернете на заданную тематику;
– классификация и маршрутизация корпоративной корреспонденции.
- подготовка датасетов. Сбор и разметка тестовых данных из реальных клиентских кейсов, формирование эталонных примеров «вход → правильный выход»
- построение системы оценки качества. Юнит-тесты для навыков, eval-наборы, регулярный замер метрик качества агентов, регрессионное тестирование при изменениях
- итеративное доведение до целевых метрик. Анализ ошибок, классификация типов сбоев, доработка механик до уровня качества, пригодного для включения в продукт
- документирование и демонстрация. Описание созданных навыков для библиотеки, подготовка демонстрационных примеров работы (материал для видео и слайдов).
Требования
- уверенное понимание механик работы LLM и агентных фреймворков (harness): контекстное окно, tool use, структурированные выводы, деградация качества
- опыт построения eval-процессов: датасеты, метрики, регрессионные тесты — или сильный опыт QA/аналитики данных с готовностью перенести его на LLM
- базовые навыки работы с данными и скриптами (Python на уровне обработки данных, JSON, markdown)
- развитые навыки сбора и формализации требований — умение превратить размытое описание бизнес-задачи в измеримую постановку
- системное мышление: декомпозиция, воспроизводимость, документирование
- высокая степень любопытства к механикам работы продукта, готовность к интенсивному графику.
Условия
- достойная заработная плата + годовой бонус
- сильная команда
- дмс, с первого рабочего дня
- работа в аккредитованной IT компании
- льготная ипотека от Сбера
- гибкий формат работы
- участие в развитии одного из ключевых направлений GenAI Сбера возможность работать с крупнейшими российскими компаниями и промышленными холдингами команду экспертов и доступ к передовым технологиям GenAI/LLM
- обучение, рост и участие в стратегических проектах по трансформации отраслей
- локация: Москва, м. Цв. Бульвар.
