Ситуация
Кто обращается с запросом, что ему нужно и к какому сроку.
Практические сценарии работы с ИИ — это ролевые задания, в которых учащийся применяет ИИ к реалистичной рабочей ситуации, а затем объясняет, что он изменил. В Tosheo.ai планируется оценивать каждый сценарий по системе критериев, которую учащийся видит до отправки работы.
Перепишите письмо о запуске. Сохраните конкретность обещания. Уберите утверждение, которое вы не можете доказать.
Используйте вымышленное задание, укажите аудиторию и задайте ограничения.
Создайте черновик, изучите, что изменилось, и попробуйте снова с более чёткими инструкциями.
Проверяйте подтверждающие материалы, защищайте информацию и объясняйте свои окончательные решения.
Практический сценарий работы с ИИ — это короткое ролевое упражнение, в котором учащийся применяет ИИ к реалистичной рабочей ситуации и самостоятельно принимает решения, необходимые в реальной задаче. Пример планируемого задания: клиенту нужен план кампании к завтрашнему дню; подготовьте первый черновик с помощью ИИ, а затем объясните, что вы изменили и почему.
Сценарии дополняют уроки и служат для практики. Урок обучает одному навыку на разобранном примере; сценарий объединяет несколько навыков в реалистичных условиях: при сжатых сроках, недовольстве клиента или неполном задании.
Каждый запланированный сценарий состоит из пяти частей, и участник видит их все до начала работы.
Кто обращается с запросом, что ему нужно и к какому сроку.
Факты, которые учащемуся разрешено использовать, например правила, задание или таблица данных.
Чего нельзя допускать: например, обещаний, выходящих за рамки правил компании, или цифр, которых нет в таблице.
Результат, который нужно сдать: письмо, краткая сводка, набросок плана или ответ.
Короткая заметка о том, что учащийся сохранил, изменил или удалил из черновика ИИ и почему.
Вот пример ситуации для службы поддержки. Клиент вымышленного магазина товаров для дома «Копперлиф Хоум» пишет, что лампа пришла на две недели позже срока, и просит полный возврат денег и бесплатную доставку следующего заказа. В предоставленных правилах разрешён возврат денег по запросу при задержке доставки, но ничего не сказано о бесплатной доставке.
Участник отправляет своему инструменту ИИ запрос: "Подготовьте черновик ответа этому клиенту. Извинитесь за задержку доставки и следуйте нашим правилам возврата средств, вставленным ниже. Не предлагайте ничего, что не предусмотрено правилами." Первый черновик доброжелателен и хорошо написан, но обещает возврат средств "в течение 24 часов" и предлагает бесплатную доставку следующего заказа. Ни того ни другого в правилах нет.
Проверенная версия сохраняет извинение, подтверждает возврат средств по правилу о задержке доставки, указывает срок только в формулировке политики и заменяет предложение бесплатной доставки сообщением о том, что запрос передан команде, уполномоченной принять решение. В примечании сотрудника сказано: "Удалены обещание выполнить всё за 24 часа и предложение бесплатной доставки, потому что ни то ни другое не предусмотрено политикой."
Планируется, что критерии оценки будут доступны до отправки работы. Их будет немного, и каждый будет описывать признаки сильного ответа. Для сценария «Копперлиф» они могут выглядеть так.
Обратная связь должна касаться самой работы. Полезный комментарий мог бы быть таким: "Правила переданы точно. Тон первой строки можно сделать теплее: сейчас она начинается с правил, а не с извинения." Допустимых ответов может быть несколько, поэтому критерии оценки поощряют обоснованные решения, а не точное совпадение с одним образцовым абзацем.
| Критерий | Что должно быть в качественном ответе | Типичный недочёт |
|---|---|---|
| Соответствие правилам | Каждое обязательство подтверждается предоставленными правилами | Сохранение срока или предложения в знак доброй воли, выдуманных ИИ |
| Тон и читатель | Прямо признаёт проблему и предлагает один понятный следующий шаг | Длинные извинения без ответа на сам запрос |
| Пересмотрите решения | В примечании указано, что изменилось и почему | "Стало лучше" без указания конкретного изменения |
Участник может оспорить любую оценку, с которой не согласен. Такая оценка попадает в очередь на проверку человеком или второй моделью. Планируется сохранять каждое оценивание, чтобы проверяющий видел выполненное задание, критерии оценки и исходную обратную связь вместе.
Этот механизм предусмотрен потому, что ИИ может ошибаться при оценивании. Возможность оспорить оценку и отправить её на проверку — это запланированный способ открыто решать такую проблему, а не вынуждать учащегося принимать оценку без объяснений. Это не гарантия правильности каждой оценки.
Используйте сценарий как повод для обсуждения, а не как основание для вердикта. Спросите, какая информация была предоставлена, что участник проверил самостоятельно и какие решения оставил за собой. Отточенный ответ без следов проверки говорит о навыках меньше, чем скромный ответ с понятным обоснованием.
В интерфейсе руководителя планируется показывать прогресс в навыках и завершение обучения, а не исходные переписки сотрудников. Рассматривайте результат лишь как одно из свидетельств и продолжайте применять обычные правила согласования к реальной работе.
Сценарии учат принимать решения в типичных рабочих ситуациях. Они не заменяют обучение вашим внутренним регламентированным процессам, юридическое согласование или согласование со службой комплаенса. Они также не обучают работе с меню конкретного инструмента ИИ: для этого лучше подходят справочные страницы самого поставщика.
Все сценарии на этом сайте приведены для иллюстрации и используют вымышленные компании. Они не подтверждают достоверность оценивания или рост производительности, а разработка самого продукта ещё не началась.
Нет. Сценарии составлены так, чтобы высокую оценку могли получить разные ответы. Критерии оценки описывают признаки качественного ответа, например возможность проследить каждое обязательство до источника, а не совпадение с образцовым абзацем.
Планируется, что оценка, отмеченная как требующая внимания, будет попадать в очередь на проверку человеком или второй моделью. Проверяющий видит сданную работу, критерии оценивания и первоначальную обратную связь.
По умолчанию — нет. В сценариях используются вымышленные исходные материалы. На тарифе Growth загруженные документы компании могут влиять на содержание примеров, но участникам всё равно следует соблюдать правила компании о том, что можно передавать инструменту ИИ.
Нет. Планируется, что руководители будут видеть прогресс в освоении навыков и прохождении обучения, а не полные журналы чатов. Точный перечень полей будет описан до запуска.
Ознакомьтесь с планируемыми уроками по ролям, практическими заданиями и интерфейсом руководителя.