DeepSearchQA
Preguntas de investigación amplias que requieren muchas búsquedas. Las respuestas son listas de elementos. Un evaluador LLM puntúa cada respuesta con un puntaje F1 sobre los elementos de la respuesta. La división completa de evaluación tiene 900 tareas.
Ejemplo representativo
Ya completé la misión Desert Treasure en Old School Runescape. ¿Puedes enumerar los hechizos con los que puedo teletransportarme a Wilderness y que requieren más de cuatro runas?
Respuesta: Dareeyak Teleport, Ghorrock Teleport