Трюки з промптами більше не працюють

Дослідники Wharton AI Labs протестували класичні прийоми користувачів: ввічливість, покрокові міркування та інші хитрощі.

Виявилось, що більшість сучасних моделей вже автоматично використовують ланцюжок міркувань, навіть без вказівок. Додавати "думай покроково" майже безглуздо. У кращому випадку це ніяк не впливає, у гіршому знижує точність і збільшує час відповіді.

Ввічливість та формальні конструкції на кшталт «будь ласка» теж не дають стабільного ефекту — іноді допомагають, іноді навпаки погіршують якість відповіді.

Окремо протестували ускладнені варіанти промптів: «обміркуй кілька варіантів», «розбий завдання на частини», «зважай на різні підходи». Все це виявилося не краще простого «думай покроково» і здебільшого марним.

Промпти з жорстким форматом («відповідь тільки у вигляді…») теж не покращили результат, не даючи моделі діяти вільно.

Висновок: AI все менше потребує підказок, а все більше здорового глузду користувача і простого промпту.