27.05.2024
Künstliche Intelligenz
Neuer Benchmark zeigt, was die Sprachmodelle drauf haben
Autor: Online Redaktion
![](/img/1/7/5/8/4/7/6/NIANGPT4o_w320_h200.jpg)
![](/img/1/7/5/8/4/7/6/NIANGPT4o_w480_h300.jpg)
![](/img/1/7/5/8/4/7/6/NIANGPT4o_w640_h400.jpg)
https://nian.llmonpy.ai/
Der neue Test "Needle in a Needlestack" fühlt Großen Sprachmodellen (Large Language Models) auf den Zahn. Vor allem OpenAIs GPT-4o glänzt darin.
Mit dem Benchmark "Needle in a Haystack" will man herausbekommen, wie gut Large Language Models (LLMs) wie die von OpenAI oder Google auf die Inhalte im Kontextfenster eingehen. Nachdem aber die LLMs immer besser wurden, reichte der Test bald nicht mehr aus, um Unterschiede zu zeigen.
Ein neuer Test musste her, und das ist Needle in a Needlestack (NIAN). Dazu erzeugt der Test zuerst eine Liste von Limericks aus einer Datenbank von Limericks. Anschließend stellt er eine spezifische Frage zu einem Limerick.
Die bisherigen Sprachmodelle wie GPT-4-turbo kommen bei diesem Test nicht gut weg. Anders sieht das beim neuen Modell von OpenAI GPT-4o aus. Das glänzt in dem Test. Unklar ist, wie OpenAI das erreicht hat.
Deloitte-Umfrage
Gen KI bietet Hoffnung und Frust für Unternehmen
Entscheider sehen Erfolge bei der Einführung von generativer künstlicher Intelligenz, es bleiben aber auch weiterhin Bedenken wegen möglicher Risiken.
>>
Akquisition
Nfon übernimmt den KI-Spezialisten Botario
Nfon setzt seinen Transformationskurs mit der Übernahme des Bremer Technologieunternehmens Botario, das sich auf KI-Lösungen für die Businesskommunikation spezialisiert hat, fort.
>>
KI für Musikempfehlungen
Transformer-Modelle revolutionieren Musikempfehlungssysteme
Eine neue Methode nutzt Transformer-Architekturen zur Verbesserung von Musikempfehlungen, indem sie das Nutzerverhalten in verschiedenen Kontexten besser versteht.
>>
"HAPS"
Luftschiff bringt schnelles Internet für unterversorgte Regionen
Dank Solarstrom kann das vom US-Luftfahrtunternehmen Sceye entwickelte Luftschiff als Relaisstation monatelang in der Stratosphäre verweilen.
>>