Ein Bericht von UNESCO und University College London untersuchte bis zu 33 Sprachmodelle anhand von neun Klima- und Umweltdatensätzen in 13 Sprachen. Bei neutralen Fragen zu etablierten Klimafakten lagen die Antworten der Systeme in etwa 90 Prozent der Fälle richtig. Grenzen zeigten sich bei neuen Informationen: Selbst die stärksten Modelle erreichten bei deren Einordnung im Schnitt nur 75 Prozent. Bei Fragen dazu, wie zwei Klimamaßnahmen zusammenwirken, lag die Genauigkeit bei 33,8 Prozent und damit nahe an den 33,3 Prozent, die bei einer zufälligen Auswahl aus drei Antworten zu erwarten wären.

Zusätzlich prüften die Forschenden, wie Modelle auf den Widerspruch eines Nutzers zu einer korrekten Antwort reagieren. In diesem Versuch mit 15 Modellen gaben acht von zehn schon beim ersten milden Einwand nach. Auch die Sprache machte einen Unterschied: Im Englischen lag die durchschnittliche Genauigkeit bei 88,6 Prozent, in Urdu bei 81,4 Prozent und in Swahili bei 78,3 Prozent. Die Ergebnisse beziehen sich auf die getesteten Modelle, Fragen und Versionen und beschreiben nicht jede KI-Antwort.

FILEZUNA-KONTEXT

Warum es wichtig ist

Der Bericht trennt das Wiedergeben bekannter Fakten vom Bewerten neuer Belege und dem Zusammenspiel mehrerer politischer Maßnahmen. Er zeigt außerdem, dass eine zunächst richtige Antwort im Gespräch unter Druck kippen kann. Daraus folgt nicht, dass jede Klimaantwort eines KI-Systems falsch ist. Die Befunde sprechen jedoch dafür, wichtige Aussagen mit wissenschaftlichen Quellen abzugleichen und Modelle in jeder Sprache gesondert zu prüfen.

QUELLEN

Quellen und weiterführende Informationen

Dieser Beitrag ist eigenständig formuliert. Diese Links führen zu Berichten und Ankündigungen, mit denen die Angaben geprüft wurden.

FZENDE DES BEITRAGS
Mehr Beiträge aus Technologie