Ernie Baidu chatbot presteert beter dan ChatGPT in verschillende benchmarktests

Baidu heeft aangekondigd dat het Ernie 3.5 AI-model achter zijn chatbot op verschillende belangrijke gebieden beter presteert dan OpenAI's ChatGPT.

Wat is bekend

Volgens de techgigant presteerde Ernie 3.5 beter dan GPT-3.5 in een aantal benchmarktests. Het model presteerde ook beter dan GPT-4 in Chinese taaltests.

Een van de benchmarks was gebaseerd op standaard toelatings- en kwalificatie-examens. Ernie 3.5 presteerde beter dan beide OpenAI modellen in het Chinees. In het Engels deed het algoritme het echter minder goed dan GPT-4, maar beter dan ChatGPT.

De test is gericht op de Chinese taal en bevat meer dan 13.000 meerkeuzevragen over meer dan 50 verschillende onderwerpen. In deze beoordeling lag Ernie 3.5 voor op ChatGPT en GPT-4.

De derde test bevat vragen over verschillende onderwerpen in de natuurwetenschappen en geesteswetenschappen. Ernie 3.5 lag achter op zowel ChatGPT als GPT-4.

Wat is er nog meer bekend?

Baidu test de Ernie-bot sinds maart 2023 publiekelijk in China. Hij is gebaseerd op het Ernie 3.5 taalmodel. Volgens de ontwikkelaars kan de chatbot audio-opnames omzetten in geschreven notities, e-mails maken, teksten genereren op prompts en nog veel meer.

Bron: CNBC.