TREC 2025 Proceedings

Retrieval-Augmented Generation Retrieval Only Task Appendix

Runtag Org ndcg_cut_30 ndcg_cut_100 recall_100
4method_merge (trec_eval)  (paper) UTokyo 0.6934 0.6134 0.2571
lucerank (trec_eval)  digsci 0.6805 0.5927 0.2435
LAS_con-que-con-nug (trec_eval)  (paper) ncsu-las 0.6692 0.4861 0.1906
hltcoe-searcher (trec_eval)  hltcoe-rerank 0.6565 0.5786 0.2466
qwen_splade (trec_eval)  (paper) UTokyo 0.6517 0.5291 0.2167
hltcoe-fsrrf (trec_eval)  hltcoe-rerank 0.6463 0.5952 0.2597
rag25_test_rankqwen3 (trec_eval)  coordinators 0.6462 0.5844 0.2435
LAS_con-que-sep-nug (trec_eval)  (paper) ncsu-las 0.6446 0.4382 0.1672
ret-gemma (trec_eval)  (paper) MITLL 0.6439 0.5637 0.2374
full-ret (trec_eval)  (paper) MITLL 0.6250 0.5704 0.2456
hltcoe-qwen (trec_eval)  hltcoe-rerank 0.6242 0.5668 0.2422
ret-no-decomp (trec_eval)  (paper) MITLL 0.6105 0.5426 0.2323
ret-no-reranker (trec_eval)  (paper) MITLL 0.6048 0.5501 0.2374
splade-v3-arctic-l (trec_eval)  coordinators 0.6009 0.5683 0.2435
ret-splade-only (trec_eval)  (paper) MITLL 0.5957 0.5389 0.2323
rag25_test_splade-v3 (trec_eval)  coordinators 0.5957 0.5387 0.2321
splade-v3-arctic-m (trec_eval)  coordinators 0.5925 0.5448 0.2326
grilllab-agent-gpt45 (trec_eval)  (paper) grilllab 0.5865 0.4093 0.1539
grilllab-agentic-gpt4 (trec_eval)  (paper) grilllab 0.5762 0.4155 0.1602
LAS_con-que (trec_eval)  (paper) ncsu-las 0.5545 0.4862 0.2072
hltcoe-qwen-jina (trec_eval)  hltcoe-rerank 0.5377 0.5260 0.2298
hltcoe-jina (trec_eval)  hltcoe-rerank 0.5360 0.5244 0.2294
hybrid-rerank (trec_eval)  clip2025 0.5346 0.4478 0.1841
LAS_sep-que (trec_eval)  (paper) ncsu-las 0.5332 0.3880 0.1550
NITA_R_JH_HY (trec_eval)  NITATREC 0.5270 0.4067 0.1583
RRF_colbert_minlm (trec_eval)  cfdalab 0.5262 0.2907 0.0951
ronly_combined (trec_eval)  (paper) WaterlooClarke 0.5193 0.3948 0.1461
RRF_all (trec_eval)  cfdalab 0.5143 0.3631 0.1381
rag25_test_arctic-m (trec_eval)  coordinators 0.5028 0.4136 0.1681
rag25_test_arctic-l (trec_eval)  coordinators 0.4991 0.4183 0.1646
NITA_R_DPR (trec_eval)  NITATREC 0.4864 0.3586 0.1333
ronly_nuggetizer (trec_eval)  (paper) WaterlooClarke 0.4863 0.4065 0.1584
ronly_auto_selected (trec_eval)  (paper) WaterlooClarke 0.4599 0.3570 0.1342
ronly_garag (trec_eval)  (paper) WaterlooClarke 0.4533 0.3647 0.1391
RRF_minilm_bm25 (trec_eval)  cfdalab 0.4454 0.3935 0.1561
sentence-transformers-all-MiniLM-L6-v2 (trec_eval)  clip2025 0.4029 0.3163 0.1225
RRF_colert_bm25 (trec_eval)  cfdalab 0.3992 0.3863 0.1584
bm25_NITA_JH (trec_eval)  NITATREC 0.3966 0.3001 0.1120
ronly_auto_plan (trec_eval)  (paper) WaterlooClarke 0.3760 0.2637 0.0996
bm25_rocchio_top100 (trec_eval)  coordinators 0.3634 0.2831 0.1092
Anserini_bm25_only (trec_eval)  cfdalab 0.3468 0.2900 0.1106
anserini_bm25_top100 (trec_eval)  coordinators 0.3468 0.2900 0.1106
uema2lab_rrf_k10 (trec_eval)  (paper) tus 0.3410 0.1697 0.0398
uema2lab_rrf (trec_eval)  (paper) tus 0.3219 0.1601 0.0375
uema2lab_segment (trec_eval)  (paper) tus 0.3200 0.1592 0.0368
uema2lab_narrative (trec_eval)  (paper) tus 0.2646 0.1311 0.0278