Kategorie: Fokusthema
-
Typische KI-Benchmarks haben große Schwächen
Von einem internationalen Forscherteam wurden 445 Publikationen zum Benchmarking für Large Language Models untersucht. Die Forscher kommen zum Ergebnis, dass die gängigen Benchmarking-Verfahren methodische Schwächen aufweisen. Beispielsweise verwenden nur ca. 10 % der KI-Benchmarks vollständig reale Aufgaben, die tatsächliche Anwendungsszenarien widerspiegeln. Zudem seien viele Benchmarks methodisch unsauber, da nicht präzise definiert sei, was eigentlich gemessen…
-
KI als Informationsquelle: Studie zeigt klare Grenzen bei Recherche-Assistenz
In der vergangenen Woche veröffentlichte die Europäische Rundfunkunion eine Studie, die signifikante Fehlerquoten bei populären KI-Chatbots aufdeckt. Demnach erfinden ChatGPT & Co. regelmäßig Informationen und präsentieren sie als Fakten, wobei die Quellen entweder falsch zugeordnet oder gar nicht angegeben werden. Laut der Studie verbreiten KI-Chatbots in bis zu 40 % der Fälle Fake News und…
-
Google erweitert die KI-Übersicht: Der neue KI-Modus verbindet Suchmaschine und Chatbot
Im letzten Newsletter berichteten wir über die KI-Übersicht bei Google. Diese wurde nun um den KI-Modus erweitert, der die klassische Suchmaschine mit einem Chatbot-Interface kombiniert. Der Rollout erfolgt derzeit schrittweise in Deutschland. Der neue Modus lässt sich – ähnlich wie die Reiter „Alle“, „Bilder“ oder „News“ – direkt in der Suchleiste auswählen. Die klassische Google-Suche…
-
Google-Suchergebnisse und Google KI-Übersicht: Integriert und doch getrennte Welten
Trotz aller Kritik an der von Google oberhalb der Suchergebnisse eingeblendeten KI-Übersicht lohnt sich ein genauerer Blick darauf, insbesondere im Vergleich mit der klassischen Google-Suche. Denn für manche Anfragen lassen sich damit schnell gute Ergebnisse erzielen. Die KI-Übersicht kann ähnlich wie ein Chat mit einem Sprachmodell genutzt werden. In die Suchmaske lassen sich auch komplexe…
-
Warum Europa eigene KI-Basismodelle braucht
Die Europäische Union treibt derzeit mit Nachdruck den Aufbau eigener KI-Basismodelle voran. Kürzlich stellte die EU-Kommission das Strategiepapier Resilienz 2.0 vor, in dem unter anderem auch dargelegt wird, wie durch Investitionen und einen angepassten Rechtsrahmen eigene KI-Infrastrukturen und Datenressourcen geschaffen werden sollen. Das Ziel ist klar: Europa soll in einer Welt, in der leistungsfähige KI-Systeme…
-
KI-Tools bevorzugen KI-generierte Texte
Wenn Künstliche Intelligenz die Wahl zwischen Texten eines Menschen und einer anderen KI hat, bevorzugt sie ihresgleichen. Dies ist das Ergebnis einer aktuellen Studie der Karlsuniversität Prag (Large language models favor communications generated by large language models). Konkret ging es darum, dass Large Language Models Kaufentscheidungen auf Basis verschiedener Texte wie Produktbeschreibungen von E-Commerce-Seiten, wissenschaftlichen…
-
Sind Chatbots nur eine Übergangslösung?
Werden Chatbot-Anwendungen mittelfristig von Agenten und Deep-Search-Modellen abgelöst? Anzeichen dafür gibt es einige: So hat bspw. Anthropic schon Ende 2024 aufgehört, in Chatbots zu investieren. Mittlerweile gibt es auch einige Untersuchungen, in denen Chatbots bspw. einmal als „die große Enttäuschung in der Arbeitswelt” bezeichnet werden. Testergebnisse wie „people struggle to get useful advice from chatbots”…