Кожен раз, коли ми взаємодіємо з чат-ботами, вони навчаються краще розуміти наші запити. Як з’ясували дослідники Amazon, стиль мовлення користувача безпосередньо впливає на якість відповідей штучного інтелекту.
У повсякденному житті ми підсвідомо змінюємо тон: у банку спілкуємось офіційно, у барі — невимушено. Вчені вирішили перевірити, чи відбувається щось подібне при розмові з ШІ та як це позначається на результатах.
Для дослідження вони проаналізували тисячі повідомлень, надісланих як живим операторам підтримки, так і ботам. Увагу звертали на граматику, словниковий запас і рівень ввічливості. Аналіз моделі Claude 3.5 Sonnet показав, що із людьми користувачі на 14,5% чемніші та офіційніші, а також на 5,3% краще формулюють свої запити.
Далі вчені взяли 13 000 реальних діалогів між людьми й використали їх для навчання моделі Mistral 7B. Потім протестували її на 1 300 повідомленнях, які люди писали чат-ботам. Для чистоти експерименту створили кілька варіацій одних і тих самих запитів у різних стилях.
Результати показали: чат-боти, навчені на комбінації повідомлень у різних форматах, у тому числі штучно створених, на 2,9% краще розуміють наміри користувачів, ніж ті, що взаємодіяли лише з одним стилем. Ба більше, спроба перетворити неформальні запити на більш офіційні «на льоту» знижувала якість відповідей на 2%.
Висновок дослідників однозначний: найкращий спосіб зробити ШІ розумнішим — навчати його різним стилям спілкування. А користувачам не варто зациклюватися на одній манері — можна обирати тон залежно від настрою, і це навіть підвищує ефективність роботи з чат-ботами.
Запис Дослідження: стиль спілкування з чат-ботами впливає на точність їхніх відповідей спершу з'явиться на ITsider.com.ua.