единица 10 / 12

Често срещани грешки и решения

Печалби:

  • Разпознава най-често срещаните бързи грешки от реални примери
  • Може да приложи практична и повторяема корекция за всяка грешка
  • Осъзнава, че лошият изход често се причинява от лоша подкана

В този модул научихме техниките за писане на добри подкани едно по едно. Сега нека ги подсилим от различен ъгъл: като разгледаме най-често срещаните грешки и техните решения. По-голямата част от лошите резултати от AI се дължат на лошо подсказване, а не на неадекватност на модела. Ако разпознаете грешки в това устройство, можете бързо да диагностицирате и коригирате проблеми в собствените си подкани; Вместо да кажете „AI не може да направи това“, можете да кажете „оставете ме да поправя подканата си по този начин“.

Защо е важно да разпознаваме грешките?

Когато резултатът не отговаря на вашите очаквания, можете да реагирате по два начина: да обвините инструмента или да поставите под въпрос подканата. Опитният потребител прави последното. Защото през повечето време източникът на проблема е очевиден и резултатът се променя с малка корекция. По-долу ще видим осемте най-често срещани грешки, техните симптоми и решения.

Осемте най-често срещани грешки

Грешка

симптом

Решение

неяснота

Общ отговор „универсален размер за всички“.

Дайте измерими инструкции

Нулев контекст

Резултат, който не отговаря на ситуацията

Добавете кой/защо/история

Без посочване на формат

Изход в грешен формат

Принудителен формат

липса на ограничения

Прекомерно, девиантно съдържание

Добавете списък „не трябва“.

претоварване

Моделът пропуска някои заявки

Разпределете работата, подредете приоритетите

непотвърждение

Използване на фалшива информация

Проверете фактите с източник

Очакване за един изстрел

Не се отказвайте на първия изход

Итерация

противоречива инструкция

непоследователен изход

Подравнете ограниченията

Диагностичен метод стъпка по стъпка

Когато пристигне повреден резултат, следвайте следния ред:

  1. Ясна ли е мисията? Конкретен ли е глаголът, означава ли единственото, което искате?
  2. Достатъчен ли е контекстът? Моделът знае ли ситуацията?
  3. Форматът споменат ли е? Форматът такъв ли е, както искате?
  4. Има ли някакви ограничения? Пише ли какво не се иска?
  5. Прекалено много ли натоварих? Поисках ли 5 ​​различни работни места в една подкана?
  6. Проверих ли? Проверени ли са номерът, името, датата?

Тези шест въпроса улавят почти всички грешки.

Четири копируеми шаблона за корекция

1) Премахване на двусмислието:

Направете тази инструкция измерима: [неясна инструкция] Преведете всяка неясна точка в конкретно число, количество или критерий.

2) Разделяне на претоварването:

Не правете тази задача наведнъж. Продължете в този ред и спрете, когато завършите всяка стъпка, изчакайте моето потвърждение:1) [подзадача 1]2) [подзадача 2]3) [подзадача 3]

3) Ограничаващ монтаж:

Просто разчитайте на информацията, която предоставих по-долу. Ако няма информация, напишете "няма данни"; не гадайте и не добавяйте. Посочете от кой ред идва всяко важно твърдение, което използвате. Източник: [текст]

4) Разрешаване на противоречието:

Проверете дали няма противоречия в инструкциите, които ви дадох. Ако е така, избройте противоречивите точки и ме попитайте кой да дам приоритет; след това произвеждайте съответно.

Слаба подкана / Силна подкана

Слаб (комбинирани много грешки):

Напишете подробен план за нашата компания относно маркетинга, бюджета и набирането на персонал и сте готови.

Мощен (поправени грешки):

Роля: Вие сте специалист по бизнес развитие, който съветва МСП. Контекст: Софтуерна компания с 12 души; целта е 20 нови клиента през това тримесечие. Задача: Напишете САМО маркетингов план (не включвайте бюджет и наемане). Формат: списък с действия от 5 точки; всеки елемент: действие + отговорност + критерии. Ограничение: Платен рекламен бюджет 0; Препоръчвайте само органични канали. Не давайте фалшиви показатели; Обосновете предложението.

Мощната версия разделя претоварването (натъпкване на три теми в една подкана), замества двусмислието („късмет“) с критерии и добавя форматиране и ограничение.

Три мини калъфа

Случай 1 — Претоварване. Мениджърът поиска резюме на отчета, план за представяне и имейл в една подкана; Моделът направи и трите наполовина. Чрез разделянето на заданието на три отделни подкани всеки изход беше завършен и използваем. Общото време беше по-малко от това да се бориш с една сложна подкана.

Случай 2 — Непотвърждение. Екип за съдържание публикува „индустриална статистика“, дадена от модела, без да я проверява; Номерът се оказа грешен и се наложи да издадат корекция. След това възприеха правилото „давай всеки номер с неговия източник, аз ще проверя източника“ и премахнаха този риск.

Случай 3 — Противоречива инструкция. Когато търговец каза „много е кратко, но кажете всички функции“, моделът пропусна някои функции. Когато направих инструкцията непротиворечива като „опишете 3-те най-важни функции в 60 думи“, резултатът беше едновременно кратък и пълен.

Съвет: Прегледайте подканата си през „шестте диагностични въпроса“, преди да стартирате на живо. Тази 30-секундна проверка прави повечето кръгове на итерация ненужни от самото начало.
Внимание: Най-опасната грешка е „невалидирането“, защото се пренебрегва, защото изходът изглежда плавен и убедителен. Моделът може да съпостави номер, име или източник с голяма увереност. Независима проверка на всеки факт, който да бъде публикуван или използван като основа за решение. Ще задълбочим тази тема в следващата част.

Невидима грешка: „Почти правилен“ резултат

Някои грешки са лесни за улавяне: резултатът идва в грешен формат, излиза извън темата или излиза празен. Но най-коварната грешка е, че резултатът е почти правилен. Текстът е плавен, структурата е гладка, тонът е точен; Има само едно грешно число, пренебрегнато ограничение или малка логическа грешка. Тези типове резултати са опасни, защото избягват проверка, защото „изглеждат добре“.

Два навика предпазват от това. Първо, не използвайте резултата, без да го прочетете: колкото и да бързате, прочетете го, преди да го изпратите. Второ, накарайте модела да провери изхода си: „проверете дали сте спазили всички ограничения, които ви дадох“ или „избройте всички числа в този текст“ ще изведе на повърхността скрити грешки. Тези две стъпки отнемат няколко секунди, но цената на неправилните решения, причинени от „почти правилния“ резултат, е много по-висока.

Избягване на грешки: дизайнът над контрола

Вместо да търси грешки в изхода, опитният потребител се опитва да ги предотврати от самото начало при подканата. Това е разлика в манталитета. Превърнете всяка повтаряща се грешка в „постоянно правило“: ако моделът продължава да добавя коментари в обобщено задание, сега задайте ограничението „не добавяйте коментари“ към всяка подкана за обобщение. Ако моделът винаги произвежда твърде много елементи в задание за списък, поставете ограничението „точно X елемента“ във вашия шаблон. По този начин, вместо да улавяте същата грешка отново и отново, вие предотвратявате появата й на първо място. Една добре проектирана подкана замества десетки последващи корекции; Това превръща диагностиката на грешки от тежест в инструмент за обучение и подобряване.

Често срещани грешки

  • Обвинявайки посредника. Да кажете „AI не може да го направи“, вместо да потърсите проблема в подканата.
  • Полагане на твърде много работа в едно подканяне. Компресиране на пет отделни задачи в една инструкция и изпълнението им наполовина.
  • Пропускане на проверката. Ако приемем, че плавният изход е правилен.
  • Даване на противоречиво ограничение. Противоречиви изисквания, като например „кратко, но изчерпателно“.
  • Опитвам отново без диагностика. Повтаряне на същата грешка, без да се установи какво е счупено.

В обобщение

  • Повечето лоши резултати са проблем с подканата, а не с модела; могат да бъдат диагностицирани и коригирани.
  • Най-често срещаните грешки: неяснота, нулев контекст, липса на формат, липса на ограничения, претоварване, липса на проверка, еднократно очакване и противоречие.
  • Шест диагностични въпроса (задача, контекст, формат, ограничение, натоварване, проверка) улавят повечето грешки.
  • Разделянето на сложни задания дава по-бързи и по-висококачествени резултати от зареждането им в една подкана.
  • Най-коварната грешка е липсата на проверка; Гладкото извеждане не означава точно.

Задача за приложение

Намерете стара разпечатка, която не харесвате, и пуснете подканата й през „шестте диагностични въпроса“. Маркирайте кои грешки възникват, приложете корекцията в този модул за всяка и стартирайте подканата отново. Обърнете внимание коя единична корекция е довела до най-голямо подобрение, а не колко рунда.

контролен списък

  • [ ] В случай на лош резултат, първо отправям запитване към подканата, а не към агента.
  • [ ] Мога да изпълня шест диагностични въпроса.
  • [ ] Разделям сложните задачи на множество подкани.
  • [ ] Забелязвам противоречиви и двусмислени инструкции и ги коригирам.
  • [ ] Проверявам фактическия резултат, преди да го публикувам.