TREC 2025 Proceedings

Product Search and Recommendation Search Task Appendix

Runtag Org ndcg_0=0,1=0,2=1,3=10 map recall_1000
garamp_rm3_f40d5_w05 (trec_eval)  (product_search.trec_eval)  (paper) DUTH 0.3852 0.2086 0.4653
garamp_rm3_v1 (trec_eval)  (product_search.trec_eval)  (paper) DUTH 0.3788 0.2119 0.4553
gar_rm3_f120d10w3 (trec_eval)  (product_search.trec_eval)  (paper) DUTH 0.3748 0.2088 0.4525
llmbaseline_g27b (trec_eval)  (product_search.trec_eval)  UIUC 0.3692 0.2308 0.3526
garamp_bm25_v1 (trec_eval)  (product_search.trec_eval)  (paper) DUTH 0.3512 0.1673 0.4317
reform_iter3 (trec_eval)  (product_search.trec_eval)  Trec-PSRT-Orgs 0.3196 0.1981 0.3138
reform_iter9 (trec_eval)  (product_search.trec_eval)  Trec-PSRT-Orgs 0.3196 0.1981 0.3138
reform_iter10 (trec_eval)  (product_search.trec_eval)  Trec-PSRT-Orgs 0.3196 0.1981 0.3138
reform_iter11 (trec_eval)  (product_search.trec_eval)  Trec-PSRT-Orgs 0.3196 0.1981 0.3138
multiagent_g27b (trec_eval)  (product_search.trec_eval)  UIUC 0.3042 0.2136 0.2732
garamp_prf_v1 (trec_eval)  (product_search.trec_eval)  (paper) DUTH 0.2996 0.1476 0.3749
reform_iter6_final (trec_eval)  (product_search.trec_eval)  Trec-PSRT-Orgs 0.2937 0.1716 0.2869
jbnu-s02 (trec_eval)  (product_search.trec_eval)  (paper) JBNU 0.2911 0.1540 0.2787
jbnu-s01 (trec_eval)  (product_search.trec_eval)  (paper) JBNU 0.2861 0.1658 0.2618
reform_test2 (trec_eval)  (product_search.trec_eval)  Trec-PSRT-Orgs 0.2807 0.1595 0.2833
jbnu-s03 (trec_eval)  (product_search.trec_eval)  (paper) JBNU 0.2697 0.1545 0.2459
baseline_run (trec_eval)  (product_search.trec_eval)  UIUC 0.2682 0.1433 0.2555
bm25 (trec_eval)  (product_search.trec_eval)  Trec-PSRT-Orgs 0.2682 0.1433 0.2555
jbnu-s04 (trec_eval)  (product_search.trec_eval)  (paper) JBNU 0.2517 0.1351 0.2478
reform_iter1 (trec_eval)  (product_search.trec_eval)  Trec-PSRT-Orgs 0.2229 0.1217 0.2221
reform_iter8 (trec_eval)  (product_search.trec_eval)  Trec-PSRT-Orgs 0.0495 0.0196 0.0392