ChatGPT svarte feil på et av ti spørsmål: Google Gemini ville ikke svare

I forbindelse med stortingsvalget i Storbritannia i år, har Reuters sjekket hvor godt chatbotene svarer på spørsmål og faktasjekker.

De har stilt 100 valgrelaterte spørsmål til ChatGPT-4o, Google Gemini og Perplexity.ai i to uker før valget.

Analysen viser at ChatGPT ga 78 prosent riktige svar, mens Perplexity.ai ga riktig svar 83 prosent av gangene. Resten av svarene ble ansett som delvis korrekte eller usanne.

Analysen viser også at Google Gemini ofte avslo å svare på valgrelaterte spørsmål, og ga bare svar på 10 prosent av spørsmålene.

ChatGPT-4o og Perplexity.ai ga ofte kilder i sine svar, inkludert de fra kjente og pålitelige nyhetsorganisasjoner, myndigheter og faktasjekkere.

Reuters skriver at Perplexity.ai lenket konsekvent til spesifikke kilder, ofte mer enn ChatGPT-4o, som noen ganger ga generiske kilder, blant annet til lenker som ikke svarte på spørsmålet.