Arena
Plattform, auf der du zwei anonyme KI-Modelle mit demselben Prompt vergleichst und mit deiner Stimme öffentliche Ranglisten speist.
Was es kann
Arena (früher LMArena) schickt deinen Prompt im Battle-Modus an zwei anonyme Modelle. Du vergleichst die Antworten nebeneinander, stimmst ab und erfährst erst danach, welche Modelle es waren. Alternativ chattest du direkt mit einem gewählten Modell. Aus den Stimmen berechnet Arena öffentliche Ranglisten, etwa für Text, WebDev, Vision, Dokumente, Suche sowie Bild- und Videoerzeugung.
Für wen es passt
Für alle, die vor der Entscheidung für ein Modell prüfen wollen, wie aktuelle Modelle bei eigenen Aufgaben abschneiden, etwa bei Texten, Code oder Website-Prototypen. Modellanbieter und Unternehmen können zusätzlich bezahlte Evaluierungen auf Basis menschlicher Bewertungen beauftragen.
Datenschutz im Unternehmen
Betreiber ist Arena Intelligence, Inc. in San Francisco; Daten können in die USA und andere Länder übertragen werden. Eine Datenhaltung in Europa bietet der Anbieter nicht an. Deine Eingaben gehen an die jeweiligen Modellanbieter, die sie nicht vertraulich behandeln müssen. Entpersonalisierte Gespräche können in öffentliche Forschungsdatensätze einfließen und an Modellanbieter zur Verbesserung ihrer Modelle gehen; abschalten lässt sich das nicht. Einen Auftragsverarbeitungsvertrag nennt der Anbieter nicht, einen Geschäftstarif für die Nutzung gibt es nicht. Vertrauliche oder personenbezogene Daten gehören deshalb nicht hinein.
Grenzen
Die Nutzung ist erst ab 18 Jahren erlaubt. Die Nutzungsbedingungen verbieten, den Dienst kommerziell zu verwerten. Eine API für eigene Anwendungen nennt der Anbieter nicht. Die Ranglisten spiegeln die Vorlieben der Abstimmenden und ersetzen keine Tests mit eigenen Daten.