Чому ChatGPT має проблеми з шахтами: Пріоритет оповіді над правилами

У недавній дискусії Nate Silver підкреслив, як погано ChatGPT виконує покер. Багато хто може припустити, що штучний інтелект, включаючи великі моделі мов, такі як ChatGPT, повинні вигравати в шахти завдяки домінуванню комп'ютерів у грі майже 30 років. Проте ChatGPT значно страждає від шахів, часто шахраює та робить недозволені ходи.

Під час шахової партії проти ChatGPT автор спостерігав склонність ШІ до шахрайства. Наприклад, ChatGPT вигадував фігури та робив недозволені ходи, такі як стверджувати, що неіснуючий кінь може взяти ферзя автора. Поведінка ШІ була нестабільною, часто виправляючи себе, коли це було зазначено, але не в змозі виявити недозволені ходи, зроблені автором.

Ця поведінка нагадує, як люди колись аналізували шахові партії до появи сильних комп'ютерних двигунів. Автор порівнює склонність ChatGPT ставити оповідь вище правил з традиційним підходом до перебільшення важливості окремих ходів та позицій, щоб вписати їх у історію. З'явившись комп'ютерні двигуни змінили це, зосереджуючись на реальності кожного ходу, а не на спілосному оповіді.