248 P(rel=3)@5 0.4000 248 nDCG@20 0.3934 248 AP(rel=3)@1000 0.2685 223 P(rel=3)@5 0.0000 223 nDCG@20 0.0725 223 AP(rel=3)@1000 0.0367 239 P(rel=3)@5 0.2000 239 nDCG@20 0.2076 239 AP(rel=3)@1000 0.0934 204 P(rel=3)@5 0.4000 204 nDCG@20 0.3976 204 AP(rel=3)@1000 0.1331 252 P(rel=3)@5 1.0000 252 nDCG@20 0.6501 252 AP(rel=3)@1000 0.5738 233 P(rel=3)@5 0.8000 233 nDCG@20 0.7294 233 AP(rel=3)@1000 0.6570 284 P(rel=3)@5 0.2000 284 nDCG@20 0.2098 284 AP(rel=3)@1000 0.1018 301 P(rel=3)@5 0.2000 301 nDCG@20 0.1607 301 AP(rel=3)@1000 0.0868 200 P(rel=3)@5 0.2000 200 nDCG@20 0.1333 200 AP(rel=3)@1000 0.0903 269 P(rel=3)@5 0.6000 269 nDCG@20 0.6684 269 AP(rel=3)@1000 0.5722 261 P(rel=3)@5 0.0000 261 nDCG@20 0.1309 261 AP(rel=3)@1000 0.0000 246 P(rel=3)@5 0.2000 246 nDCG@20 0.7912 246 AP(rel=3)@1000 0.5526 290 P(rel=3)@5 0.0000 290 nDCG@20 0.0535 290 AP(rel=3)@1000 0.0138 267 P(rel=3)@5 0.4000 267 nDCG@20 0.5881 267 AP(rel=3)@1000 0.5095 218 P(rel=3)@5 0.2000 218 nDCG@20 0.3278 218 AP(rel=3)@1000 0.2171 278 P(rel=3)@5 0.2000 278 nDCG@20 0.2769 278 AP(rel=3)@1000 0.1289 205 P(rel=3)@5 0.4000 205 nDCG@20 0.5551 205 AP(rel=3)@1000 0.3969 273 P(rel=3)@5 0.4000 273 nDCG@20 0.4787 273 AP(rel=3)@1000 0.3306 228 P(rel=3)@5 0.0000 228 nDCG@20 0.1329 228 AP(rel=3)@1000 0.0484 300 P(rel=3)@5 0.2000 300 nDCG@20 0.3717 300 AP(rel=3)@1000 0.2594 221 P(rel=3)@5 0.4000 221 nDCG@20 0.6372 221 AP(rel=3)@1000 0.6465 262 P(rel=3)@5 0.4000 262 nDCG@20 0.3939 262 AP(rel=3)@1000 0.2339 254 P(rel=3)@5 0.4000 254 nDCG@20 0.6856 254 AP(rel=3)@1000 0.7500 212 P(rel=3)@5 0.0000 212 nDCG@20 0.0517 212 AP(rel=3)@1000 0.0229 227 P(rel=3)@5 0.2000 227 nDCG@20 0.7262 227 AP(rel=3)@1000 1.0000 263 P(rel=3)@5 0.2000 263 nDCG@20 0.2384 263 AP(rel=3)@1000 0.1460 202 P(rel=3)@5 0.4000 202 nDCG@20 0.5062 202 AP(rel=3)@1000 0.5597 293 P(rel=3)@5 0.0000 293 nDCG@20 0.0000 293 AP(rel=3)@1000 0.0014 298 P(rel=3)@5 0.0000 298 nDCG@20 0.0000 298 AP(rel=3)@1000 0.0068 272 P(rel=3)@5 0.2000 272 nDCG@20 0.3129 272 AP(rel=3)@1000 0.1971 289 P(rel=3)@5 0.0000 289 nDCG@20 0.0360 289 AP(rel=3)@1000 0.0035 211 P(rel=3)@5 0.6000 211 nDCG@20 0.3547 211 AP(rel=3)@1000 0.2858 226 P(rel=3)@5 0.0000 226 nDCG@20 0.1832 226 AP(rel=3)@1000 0.0011 270 P(rel=3)@5 0.0000 270 nDCG@20 0.0000 270 AP(rel=3)@1000 0.0329 235 P(rel=3)@5 0.0000 235 nDCG@20 0.0965 235 AP(rel=3)@1000 0.0000 250 P(rel=3)@5 0.4000 250 nDCG@20 0.3883 250 AP(rel=3)@1000 0.2294 245 P(rel=3)@5 0.0000 245 nDCG@20 0.0425 245 AP(rel=3)@1000 0.0000 214 P(rel=3)@5 0.8000 214 nDCG@20 0.5726 214 AP(rel=3)@1000 0.4545 207 P(rel=3)@5 0.0000 207 nDCG@20 0.1561 207 AP(rel=3)@1000 0.0556 286 P(rel=3)@5 0.0000 286 nDCG@20 0.0160 286 AP(rel=3)@1000 0.0167 256 P(rel=3)@5 0.4000 256 nDCG@20 0.3749 256 AP(rel=3)@1000 0.2457 294 P(rel=3)@5 0.0000 294 nDCG@20 0.0926 294 AP(rel=3)@1000 0.0367 229 P(rel=3)@5 0.2000 229 nDCG@20 0.2396 229 AP(rel=3)@1000 0.1250 266 P(rel=3)@5 0.0000 266 nDCG@20 0.0000 266 AP(rel=3)@1000 0.0051 219 P(rel=3)@5 0.2000 219 nDCG@20 0.3044 219 AP(rel=3)@1000 0.5000 283 P(rel=3)@5 0.2000 283 nDCG@20 0.3421 283 AP(rel=3)@1000 0.1874 280 P(rel=3)@5 0.4000 280 nDCG@20 0.5276 280 AP(rel=3)@1000 0.3694 240 P(rel=3)@5 0.6000 240 nDCG@20 0.8134 240 AP(rel=3)@1000 0.7123 236 P(rel=3)@5 0.0000 236 nDCG@20 0.0000 236 AP(rel=3)@1000 0.0314 299 P(rel=3)@5 0.0000 299 nDCG@20 0.0252 299 AP(rel=3)@1000 0.0068 224 P(rel=3)@5 0.2000 224 nDCG@20 0.3575 224 AP(rel=3)@1000 0.2830 276 P(rel=3)@5 0.8000 276 nDCG@20 0.6654 276 AP(rel=3)@1000 0.6203 225 P(rel=3)@5 0.4000 225 nDCG@20 0.5241 225 AP(rel=3)@1000 0.4369 302 P(rel=3)@5 0.0000 302 nDCG@20 0.0347 302 AP(rel=3)@1000 0.0216 216 P(rel=3)@5 0.0000 216 nDCG@20 0.0786 216 AP(rel=3)@1000 0.0204 222 P(rel=3)@5 0.4000 222 nDCG@20 0.4964 222 AP(rel=3)@1000 0.4263 277 P(rel=3)@5 0.6000 277 nDCG@20 0.5237 277 AP(rel=3)@1000 0.4033 203 P(rel=3)@5 0.0000 203 nDCG@20 0.1561 203 AP(rel=3)@1000 0.0224 210 P(rel=3)@5 0.0000 210 nDCG@20 0.0000 210 AP(rel=3)@1000 0.0025 208 P(rel=3)@5 0.2000 208 nDCG@20 0.1306 208 AP(rel=3)@1000 0.0499 206 P(rel=3)@5 0.0000 206 nDCG@20 0.2580 206 AP(rel=3)@1000 0.0734 215 P(rel=3)@5 0.2000 215 nDCG@20 0.6759 215 AP(rel=3)@1000 0.5024 237 P(rel=3)@5 0.0000 237 nDCG@20 0.0616 237 AP(rel=3)@1000 0.0148 238 P(rel=3)@5 0.2000 238 nDCG@20 0.2716 238 AP(rel=3)@1000 0.1015 232 P(rel=3)@5 0.8000 232 nDCG@20 0.4362 232 AP(rel=3)@1000 0.2459 291 P(rel=3)@5 0.0000 291 nDCG@20 0.1738 291 AP(rel=3)@1000 0.0738 247 P(rel=3)@5 0.4000 247 nDCG@20 0.3399 247 AP(rel=3)@1000 0.1694 257 P(rel=3)@5 0.0000 257 nDCG@20 0.1035 257 AP(rel=3)@1000 0.0301 296 P(rel=3)@5 0.2000 296 nDCG@20 0.6384 296 AP(rel=3)@1000 0.5143 264 P(rel=3)@5 0.0000 264 nDCG@20 0.0706 264 AP(rel=3)@1000 0.0232 242 P(rel=3)@5 0.0000 242 nDCG@20 0.1985 242 AP(rel=3)@1000 0.0073 281 P(rel=3)@5 0.4000 281 nDCG@20 0.4138 281 AP(rel=3)@1000 0.3071 248 P@5 0.4000 248 AP@1000 0.2656 223 P@5 0.0000 223 AP@1000 0.0940 239 P@5 0.2000 239 AP@1000 0.0730 204 P@5 0.4000 204 AP@1000 0.1340 252 P@5 1.0000 252 AP@1000 0.6035 233 P@5 1.0000 233 AP@1000 0.4975 284 P@5 0.2000 284 AP@1000 0.1456 301 P@5 0.2000 301 AP@1000 0.0668 200 P@5 0.2000 200 AP@1000 0.0985 269 P@5 0.6000 269 AP@1000 0.4873 261 P@5 0.0000 261 AP@1000 0.0310 246 P@5 0.6000 246 AP@1000 0.6717 290 P@5 0.0000 290 AP@1000 0.0295 267 P@5 0.4000 267 AP@1000 0.3888 218 P@5 0.4000 218 AP@1000 0.2060 278 P@5 0.4000 278 AP@1000 0.2564 205 P@5 0.6000 205 AP@1000 0.2609 273 P@5 0.4000 273 AP@1000 0.2521 228 P@5 0.2000 228 AP@1000 0.1088 300 P@5 0.2000 300 AP@1000 0.2103 221 P@5 0.6000 221 AP@1000 0.4027 262 P@5 0.6000 262 AP@1000 0.2729 254 P@5 0.8000 254 AP@1000 0.4824 212 P@5 0.2000 212 AP@1000 0.0657 227 P@5 0.2000 227 AP@1000 0.3373 263 P@5 0.4000 263 AP@1000 0.2065 202 P@5 0.4000 202 AP@1000 0.1794 293 P@5 0.0000 293 AP@1000 0.0011 298 P@5 0.0000 298 AP@1000 0.0096 272 P@5 0.4000 272 AP@1000 0.1428 289 P@5 0.0000 289 AP@1000 0.0286 211 P@5 0.6000 211 AP@1000 0.2745 226 P@5 0.6000 226 AP@1000 0.1579 270 P@5 0.0000 270 AP@1000 0.0242 235 P@5 0.0000 235 AP@1000 0.0448 250 P@5 0.4000 250 AP@1000 0.2279 245 P@5 0.0000 245 AP@1000 0.0241 214 P@5 0.8000 214 AP@1000 0.5270 207 P@5 0.0000 207 AP@1000 0.1000 286 P@5 0.0000 286 AP@1000 0.0547 256 P@5 0.4000 256 AP@1000 0.2287 294 P@5 0.2000 294 AP@1000 0.0766 229 P@5 0.2000 229 AP@1000 0.1111 266 P@5 0.0000 266 AP@1000 0.0077 219 P@5 0.4000 219 AP@1000 0.1279 283 P@5 0.4000 283 AP@1000 0.2966 280 P@5 0.4000 280 AP@1000 0.3883 240 P@5 0.8000 240 AP@1000 0.6378 236 P@5 0.0000 236 AP@1000 0.0366 299 P@5 0.0000 299 AP@1000 0.0156 224 P@5 0.2000 224 AP@1000 0.1326 276 P@5 0.8000 276 AP@1000 0.5640 225 P@5 0.6000 225 AP@1000 0.5163 302 P@5 0.0000 302 AP@1000 0.0500 216 P@5 0.2000 216 AP@1000 0.0992 222 P@5 0.6000 222 AP@1000 0.2712 277 P@5 0.6000 277 AP@1000 0.4267 203 P@5 0.4000 203 AP@1000 0.0849 210 P@5 0.0000 210 AP@1000 0.0198 208 P@5 0.2000 208 AP@1000 0.0470 206 P@5 0.4000 206 AP@1000 0.1983 215 P@5 0.8000 215 AP@1000 0.5916 237 P@5 0.0000 237 AP@1000 0.0212 238 P@5 0.4000 238 AP@1000 0.3325 232 P@5 0.8000 232 AP@1000 0.2427 291 P@5 0.2000 291 AP@1000 0.1046 247 P@5 0.6000 247 AP@1000 0.1724 257 P@5 0.0000 257 AP@1000 0.0384 296 P@5 0.6000 296 AP@1000 0.5127 264 P@5 0.0000 264 AP@1000 0.0230 242 P@5 0.4000 242 AP@1000 0.2744 281 P@5 0.4000 281 AP@1000 0.2985 all nDCG@20 0.3063 all P@5 0.3389 all AP@1000 0.2138 all P(rel=3)@5 0.2333 all AP(rel=3)@1000 0.2262