Étude : l'intelligence artificielle rédige des tweets plus convaincants que les humains

Par: Bohdan Kaminskyi | 29.06.2023, 13:45

Les utilisateurs trouvent les tweets plus convaincants lorsqu'ils sont rédigés par un modèle linguistique alimenté par l'IA plutôt que par un humain.

Ce que nous savons

Les chercheurs ont collecté des messages Twitter traitant de 11 sujets scientifiques différents, des vaccins au COVID-19 en passant par le changement climatique et l'évolution. Ils ont ensuite demandé à GPT-3 de rédiger de nouveaux tweets contenant des informations exactes ou inexactes.

L'équipe a ensuite recueilli les réponses de 697 participants. Tous parlaient anglais et vivaient principalement au Royaume-Uni, en Australie, au Canada, aux États-Unis et en Irlande. Il leur a été demandé d'identifier les tweets rédigés par GPT-3 et ceux rédigés par un humain. Ils devaient également décider si les informations contenues dans le message étaient vraies.

En conséquence, les participants à l'étude étaient plus enclins à faire confiance à l'IA qu'à d'autres personnes, quelle que soit l'exactitude des informations.

Les gens ont mieux réussi à reconnaître la désinformation écrite par de vrais utilisateurs. Les faux messages générés par GPT-3 ont été légèrement plus efficaces pour tromper les participants à l'enquête.

Les chercheurs ont noté qu'un certain nombre de limitations ont affecté les résultats. Par exemple, les participants ont évalué les tweets hors contexte. Ils n'ont pas pu consulter le profil Twitter de l'auteur du message pour en déterminer l'authenticité.

Les chercheurs ont également inversé le processus et demandé au GPT-3 d'évaluer la véracité des tweets. Il s'est avéré que le modèle linguistique était moins performant que les humains pour déterminer l'exactitude des messages. En ce qui concerne la détection de la désinformation, les humains et le GPT-3 ont obtenu les mêmes résultats.

En conclusion, les chercheurs estiment que la meilleure stratégie pour contrer la désinformation est de développer la pensée critique afin que les gens puissent séparer eux-mêmes les faits de la fiction.

Source : The Verge : The Verge.