ИИ без ролей работает лучше? Исследование об эффективности персон в промптах
Источник: https://t.me/SberAIScience/4301
Краткое содержание
Новое исследование показало, что задание роли («Ты эксперт по...») в промптах помогает не всегда. Sber AI публикует практическую памятку: когда роль полезна, а когда мешает.
Роль помогает:
- Улучшить тон и стиль текста
- Придерживаться формата
- Генерировать подробные ответы
- Снизить вероятность ошибок
Роль мешает:
- При поиске фактов и информации
- В математике и логических рассуждениях
- В программировании, где важна точность
Иллюстративный пример: промпт с ролью vs без:
# С ролью (может снижать точность)
Ты эксперт-математик. Реши задачу: ...
# Без роли (лучше для вычислений)
Реши задачу: ...
Значимость
Практический совет для всех, кто работает с LLM: рассуждающие модели (reasoning models) не нуждаются в роли — качество ответа определяется контекстом задачи. Если роль всё же нужна для точных задач (например, в программировании), она должна быть короткой, чтобы не вытеснять важные факты из контекста.
🧾 Транскрипт (формат)
ИИ БЕЗ ПЕРСОН РАБОТАЕТ ЛУЧШЕ 🤩
Источник: https://t.me/SberAIScience/4301
ИИ БЕЗ ПЕРСОН РАБОТАЕТ ЛУЧШЕ? 🤩
Мы часто добавляем в промпты фразы вроде «Ты эксперт по…», чтобы ИИ отвечал лучше. Но всегда ли эта практика работает?
Новое исследование показало, что заданная роль иногда приносит больше вреда, чем пользы.
Кратко рассказываем, что к чему 🤩
РОЛЬ РАБОТАЕТ, ЕСЛИ НУЖНО ✅ Улучшить тон и стиль текста ✅ Придерживаться формата и правил написания ✅ Генерировать подробные ответы ✅ Снизить вероятность ошибок
РОЛЬ МЕШАЕТ ⚠️ При поиске фактов и информации ⚠️ В математике и логических рассуждениях ⚠️ В программировании, где важна точность выполнения условий
Мы подготовили небольшую памятку по использованию ролей в промптах 🤩
1️⃣ Всегда задавайте роли для креативных и редакторских задач — там они реально помогают. Для вычислений, фактов и сложной логики лучше обходиться без них 2️⃣ При работе с рассуждающими моделями роль прописывать необязательно. Качество ответа зависит от контекста задачи, а не от «экспертности» 3️⃣ Если роль всё-таки нужна для задачи, требующей точности (например, в программировании), делайте её короткой. Так она не помешает ИИ запоминать важные факты
❤️ — жизнь игра, а мы в ней ИИ-роли 🔥 — спасибо, сохранил
✔️ Подписывайтесь на Sber AI в МАКС