DeepSearchQA
Breite Recherchefragen, die viele Suchen erfordern. Die Antworten sind Listen von Einträgen. Ein LLM-Bewerter bewertet jede Antwort mit einem F1-Score über die Antworteinträge. Der vollständige Eval-Split umfasst 900 Aufgaben.
Repräsentatives Beispiel
Ich habe die Quest Desert Treasure in Old School Runescape abgeschlossen. Kannst du alle Zauber nennen, mit denen ich mich in die Wilderness teleportieren kann und die mehr als vier Runen benötigen?
Antwort: Dareeyak Teleport, Ghorrock Teleport