Текст
| Задача | Ярус | Размышление | Подвох |
|---|---|---|---|
| перевод, пересказ, «перепиши короче» | маленькая или средняя | не нужно | термины переводит по-разному в разных местах — даём глоссарий |
| письмо, пост, описание по нашим фактам | средняя | низкое | дописывает факты от себя — просим помечать то, чего не было в материалах |
| правка чужого текста под стиль | средняя | низкое | правило стиля и два примера «до и после» («Пример вместо описания») работают лучше описания |
| вычитка: опечатки, согласование | средняя | низкое | правит смысл вместе с опечатками — просим список правок, а не новый текст |
| конспект длинного документа | средняя | среднее | теряет середину — просим конспект по разделам с номерами страниц |
Код и конфиги
| Задача | Ярус | Размышление | Подвох |
|---|---|---|---|
скрипт на 50 строк, regex, jq, однострочник |
средняя | низкое | флаги утилит путает между GNU и BSD — пишем ОС и версию («Дата, версии и окружение — в промпт») |
| объяснить чужой код или конфиг | средняя | среднее | объясняет по именам, а не по коду — просим ссылку на строку |
| найти ошибку по трейсу | флагман | среднее или высокое | трейс без кода даёт угадывание — прикладываем файл, где упало |
| изменение в нескольких файлах | флагман в агенте | высокое | правит лишнее — коммит до запуска и git diff после («Чистый git status перед агентом») |
| архитектура, миграция, план на неделю | флагман или самая сильная | высокое или max |
соглашается с нашей идеей — просим два варианта и минусы каждого («Проверка в новом чате») |
Dockerfile, compose, traefik.yml |
флагман | среднее | ключи из старых версий — даём версию программы и кусок документации |
Разбор и извлечение
| Задача | Ярус | Размышление | Подвох |
|---|---|---|---|
| лог на 5000 строк: что сломалось | средняя | среднее | цепляется за первую ошибку, а не за причину — просим хронологию |
| письмо, счёт, договор — поля в JSON | маленькая | не нужно | придумывает поле, которого нет, — схема с null для пустого («JSON по схеме») |
| разметить тысячи записей по категориям | маленькая, пакетом | не нужно | категории «на грани» — пример на каждую, ответ одним словом («Не срочные запросы к API — пакетом за полцены») |
| сравнить два документа | флагман | среднее | пропускает мелкие отличия — сначала diff, модели — только смысл |
| таблица или столбец чисел | — | — | считать — скрипту; модель пишет скрипт или формулу |
Картинки, PDF, звук
| Задача | Что берём | Подвох |
|---|---|---|
| скриншот ошибки, интерфейса | любая модель с картинками на вход | мелкий текст читает с ошибками — лучше скопировать текст ошибки |
| PDF со сканами и таблицами | флагман, PDF целиком | номера страниц в ответе — проверяем по файлу |
| схема, график, фото доски | флагман | точные числа с графика — приблизительно |
| нарисовать картинку | генератор изображений, а не языковая модель | текст на картинке и мелкие детали — слабое место |
| расшифровка записи | модель распознавания речи (Whisper и аналоги) | имена и термины — словарём подсказки |
Поиск фактов
| Задача | Что берём | Подвох |
|---|---|---|
| версия, цена, дата релиза | модель с поиском, ответ со ссылками | без поиска — дата среза знаний («Дата, версии и окружение — в промпт») |
| «как правильно настроить X» | официальная документация в контекст | общие советы из интернета пятилетней давности |
| сравнить три инструмента | флагман с поиском | в сравнении побеждает тот, о ком больше писали |
Когда ярус выше не помогает
- Нет данных в контексте. Сильная модель угадывает так же уверенно, как слабая; лечится материалами, а не ярусом.
- Задача формальная: сумма, сортировка, подсчёт. Скрипт даёт один и тот же верный ответ на миллионе строк, модель — правдоподобный.
- Промпт двусмысленный. Сильная модель угадает другое толкование, но всё равно угадает — уточняем задачу («Сначала вопросы и план»).