Promt инженер LLM

Чем предстоит заниматься:

• Создание, разработка и тестирование запросов и функциональных описаний для больших языковых моделей (LLM), таких как ChatGPT и GPT-4 от OpenAI, а также для других подобных систем;
• Взаимодействовать с командами для анализа их требований к ответам LLM;
• Проводить оценку ответов LLM на точность, полноту, адекватность, тональность и безопасность;
• Идентифицировать проблемные случаи и корректировать промпты для их исправления.

Что мы ожидаем от кандидата:

• Опыт работы в роли Promt инженера/ML инженера от 6 мес.;
• Опыт ручного/автоматизированного тестирования;
• Базовые знания о тестировании систем на основе искусственного интеллекта и/или об искусственном интеллекте для тестирования;
• Теоретические знания и практический опыт работы с моделями машинного обучения, особенно в области NLP;
• Навыки создания и улучшения промптов (запросов) для получения желаемых результатов от LLM;
• Умение анализировать результаты промптов и корректировать их для улучшения производительности и точности;
• Навыки анализа данных для оценки производительности моделей и промпов;
• Умение творчески подходить к созданию промптов и решению задач с помощью LLM;
• Можешь организовать свою работу и делаешь всё без контроля и напоминаний;
• Креативность. Ты умеешь решать не стандартные сложные задачи легким путем.

Мы предлагаем:

• Работа в крупнейшем в России интегрированном провайдере цифровых решений;
• Возможна полная или частичная удаленная работа;
• Официальное оформление — согласно ТК РФ (полный соц. пакет: ежегодный оплачиваемый отпуск 28 календарных дней, оплата больничных);
• Официальная заработная плата (оклад и годовая премия);
• Кафетерий льгот с 1 рабочего дня: ДМС, компенсация транспорта, интернета, спорта, обучения и др.;
• Корпоративное обучение: внутренние митапы, участие в конференциях, доступ к корпоративным библиотекам технической и бизнес литератур