Google’s AI Overviews geeft miljoenen foute antwoorden per dag. Dat blijkt uit een analyse van de New York Times. Het systeem beantwoordt ongeveer 90 procent van de vragen correct. Maar bij miljarden zoekopdrachten betekent dit nog altijd honderdduizenden fouten per minuut.
Het onderzoek werd uitgevoerd met hulp van het AI-bedrijf Oumi. Zij testten Google’s AI Overviews met een bekende factualiteitstest: SimpleQA. Dit is een lijst van meer dan 4.000 vragen met verifieerbare antwoorden. Bij de eerste test scoorde het systeem 85 procent correct. Na een update naar Gemini 3 steeg dit naar 91 procent. Maar zelfs die verbetering betekent nog tientallen miljoenen foute antwoorden per dag.
De onderzoekers geven concrete voorbeelden van fouten. Zo vroegen ze naar de datum waarop het voormalige huis van Bob Marley een museum werd. AI Overviews citeerde drie bronnen, maar koos zelfverzekerd het verkeerde jaartal. Bij een vraag over Yo-Yo Ma beweerde het systeem zelfs dat de Classical Music Hall of Fame niet bestaat, terwijl het de website van die organisatie zelf als bron gebruikte.
Google reageert kritisch op het onderzoek. Woordvoerder Ned Adriance noemt de studie onvolledig. Volgens hem weerspiegelt de test niet wat mensen echt zoeken op Google. Het bedrijf gebruikt liever een eigen versie van de test, SimpleQA Verified, met een kleinere maar beter gecontroleerde set vragen. Critici wijzen er echter op dat de schaal van Google’s platform de foutenmarge bijzonder zorgwekkend maakt.
