Дослідження: штучний інтелект пише переконливіші твіти, ніж люди

Користувачі вважають твіти переконливішими, якщо вони написані мовною моделлю на основі штучного інтелекту, а не людиною.

Що відомо

Учені зібрали повідомлення з Twitter, у яких обговорювали 11 різних наукових тем - від вакцин і COVID-19 до зміни клімату та еволюції. Потім вони попросили GPT-3 написати нові твіти з точною або неточною інформацією.

Потім команда зібрала відповіді від 697 учасників. Усі вони говорили англійською мовою і проживали переважно у Великій Британії, Австралії, Канаді, США та Ірландії. Їх попросили визначити, які твіти написала GPT-3, а які людина. Також їм потрібно було вирішити, чи є інформація в пості правдивою.

У результаті, учасники дослідження з більшою ймовірністю довіряли ШІ, ніж іншим людям - незалежно від точності інформації.

Найуспішніше люди розпізнавали дезінформацію, написану реальними користувачами. Пости з фейками, згенеровані GPT-3, виявилися трохи ефективнішими в обмані учасників опитування.

Дослідники зазначили, що існує низка обмежень, які вплинули на результати. Наприклад, учасники оцінювали твіти поза контекстом. Вони не могли перевірити профіль у Twitter автора повідомлення, щоб визначити його достовірність.

Також дослідники виконали зворотний процес і попросили GPT-3 оцінити правдивість твітів. Виявилося, що мовна модель гірше за людей визначає точність повідомлень. Коли йшлося про виявлення дезінформації, люди та GPT-3 показали однакові результати.

Насамкінець учені вважають, що найкраща стратегія протидії дезінформації - розвиток критичного мислення, щоб люди самостійно могли відокремлювати факти від вигадки.

Джерело: The Verge.