Forschung

Watch out for satire! – Caution AI!

Satire ist eine besondere Herausforderung für KI-Systeme. Um die Möglichkeiten derzeitiger KI-Systeme zu testen, habe ich ein Projekt gestartet, das KI generierte satirische Nachrichten...
Stöckl Andreas
33 sec read

EU Safety Award 2023

Unser KI-basiertes Forschungsprojekt, das Sicherheitsrisiken in Online-Produktbewertungen identifiziert, wurde mit dem prestigeträchtigen EU Safety Award ausgezeichnet. In Zusammenarbeit mit dem Kuratorium für Verkehrssicherheit entwickelt,...
Stöckl Andreas
22 sec read

Intelligent Systems Conference 2023 Konferenz

Im Rahmen der Intelligent Systems Conference 2023 Konferenz (https://saiconference.com/Conferences/IntelliSys2023) in Amsterdam habe ich ein Interview zu unserem Projekt und Paper “Application of Language Models...
Stöckl Andreas
17 sec read

Wie sich das Verhalten von ChatGPT im Laufe der…

Die Forschungspapierstudie “Wie sich das Verhalten von ChatGPT im Laufe der Zeit ändert?” untersucht die Veränderungen im Verhalten von GPT-3.5 und GPT-4, zwei weit...
Stöckl Andreas
2 min read

Wie Sprachmodelle lange Kontexte nutzen: Erkenntnisse und Grenzen

Sprachmodelle haben in den letzten Jahren enorme Fortschritte gemacht und können nun auch längere Kontexte als Eingabe verarbeiten. Doch wie gut nutzen diese Modelle...
Stöckl Andreas
2 min read

Skalierung der Sequenzlänge: Die Vorteile und Grenzen von LONGNET

Die Schlüsselinnovation in LONGNET ist die Einführung von dilatierter Aufmerksamkeit, einem neuartigen Aufmerksamkeitsmechanismus, der das Aufmerksamkeitsfeld exponentiell erweitert, wenn der Abstand zwischen den Tokens...
Stöckl Andreas
2 min read

Auswirkungen hochwertiger Daten auf die Leistung großer Sprachmodelle (LLMs)

Die Forscher stellten ein neues LLM namens phi-1 vor, das ein Transformer-basiertes Modell mit 1,3 Milliarden Parametern ist. Der Trainingsprozess umfasste zwei Hauptschritte: Pretraining...
Stöckl Andreas
2 min read

Erforschung der Folgen und Schlüsselfaktoren der Wiederholung von Pre-Trainingsdaten…

In der Welt der künstlichen Intelligenz sind große Sprachmodelle (LLMs) aufgrund ihrer Fähigkeit, menschenähnlichen Text zu verstehen und zu generieren, immer beliebter geworden. Da...
Stöckl Andreas
2 min read

Best Paper Award auf der “IntelliSys 2022”

Auf der internationales Konferenz “Intelligent Systems (IntelliSys) 2022” (https://saiconference.com/IntelliSys), die sich auf den Bereich der künstlichen Intelligenz und deren Anwendung in der realen Welt...
Stöckl Andreas
37 sec read

Projektpräsentation auf der EU- Safety Konferenz 2022 in Wien

Im Rahmen der “EU Safety Konferenz” (https://www.eu-safety2022.com/) in Wien durfte ich eine Keynote zu einem aktuellen Projekt halten. Um das Potenzial künstlicher Intelligenz im...
Stöckl Andreas
25 sec read