236 P(rel=3)@5 0.8000 236 nDCG@20 0.6049 236 AP(rel=3)@1000 0.4437 302 P(rel=3)@5 0.4000 302 nDCG@20 0.4836 302 AP(rel=3)@1000 0.3920 269 P(rel=3)@5 1.0000 269 nDCG@20 0.8707 269 AP(rel=3)@1000 0.9288 266 P(rel=3)@5 0.0000 266 nDCG@20 0.0249 266 AP(rel=3)@1000 0.0035 284 P(rel=3)@5 0.0000 284 nDCG@20 0.0791 284 AP(rel=3)@1000 0.0303 242 P(rel=3)@5 0.0000 242 nDCG@20 0.1092 242 AP(rel=3)@1000 0.0085 291 P(rel=3)@5 0.2000 291 nDCG@20 0.4399 291 AP(rel=3)@1000 0.2917 225 P(rel=3)@5 0.8000 225 nDCG@20 0.8488 225 AP(rel=3)@1000 0.7438 283 P(rel=3)@5 0.4000 283 nDCG@20 0.3746 283 AP(rel=3)@1000 0.1713 221 P(rel=3)@5 0.4000 221 nDCG@20 0.5706 221 AP(rel=3)@1000 0.4722 215 P(rel=3)@5 0.2000 215 nDCG@20 0.8409 215 AP(rel=3)@1000 0.6429 222 P(rel=3)@5 0.2000 222 nDCG@20 0.3915 222 AP(rel=3)@1000 0.2796 293 P(rel=3)@5 0.0000 293 nDCG@20 0.0000 293 AP(rel=3)@1000 0.0012 276 P(rel=3)@5 0.4000 276 nDCG@20 0.8973 276 AP(rel=3)@1000 0.7267 203 P(rel=3)@5 0.6000 203 nDCG@20 0.4831 203 AP(rel=3)@1000 0.2079 245 P(rel=3)@5 0.0000 245 nDCG@20 0.0540 245 AP(rel=3)@1000 0.0000 212 P(rel=3)@5 0.6000 212 nDCG@20 0.7822 212 AP(rel=3)@1000 0.8500 218 P(rel=3)@5 0.2000 218 nDCG@20 0.3395 218 AP(rel=3)@1000 0.2058 223 P(rel=3)@5 0.2000 223 nDCG@20 0.2006 223 AP(rel=3)@1000 0.0996 256 P(rel=3)@5 0.6000 256 nDCG@20 0.5658 256 AP(rel=3)@1000 0.3804 250 P(rel=3)@5 0.8000 250 nDCG@20 0.4988 250 AP(rel=3)@1000 0.3174 299 P(rel=3)@5 0.4000 299 nDCG@20 0.5131 299 AP(rel=3)@1000 0.4314 204 P(rel=3)@5 0.0000 204 nDCG@20 0.1552 204 AP(rel=3)@1000 0.0754 211 P(rel=3)@5 0.8000 211 nDCG@20 0.7235 211 AP(rel=3)@1000 0.7253 224 P(rel=3)@5 0.4000 224 nDCG@20 0.4176 224 AP(rel=3)@1000 0.3083 272 P(rel=3)@5 0.4000 272 nDCG@20 0.5593 272 AP(rel=3)@1000 0.3900 227 P(rel=3)@5 0.2000 227 nDCG@20 0.7262 227 AP(rel=3)@1000 1.0000 205 P(rel=3)@5 0.6000 205 nDCG@20 0.7090 205 AP(rel=3)@1000 0.5250 226 P(rel=3)@5 0.0000 226 nDCG@20 0.2344 226 AP(rel=3)@1000 0.0009 264 P(rel=3)@5 0.0000 264 nDCG@20 0.0000 264 AP(rel=3)@1000 0.0223 202 P(rel=3)@5 0.4000 202 nDCG@20 0.3825 202 AP(rel=3)@1000 0.3076 290 P(rel=3)@5 0.4000 290 nDCG@20 0.3634 290 AP(rel=3)@1000 0.1466 257 P(rel=3)@5 0.6000 257 nDCG@20 0.9360 257 AP(rel=3)@1000 0.8667 281 P(rel=3)@5 1.0000 281 nDCG@20 0.8002 281 AP(rel=3)@1000 0.7081 248 P(rel=3)@5 0.4000 248 nDCG@20 0.4247 248 AP(rel=3)@1000 0.3032 289 P(rel=3)@5 0.2000 289 nDCG@20 0.3257 289 AP(rel=3)@1000 0.3333 278 P(rel=3)@5 0.8000 278 nDCG@20 0.6945 278 AP(rel=3)@1000 0.6750 301 P(rel=3)@5 0.8000 301 nDCG@20 0.7692 301 AP(rel=3)@1000 0.7375 216 P(rel=3)@5 0.0000 216 nDCG@20 0.0000 216 AP(rel=3)@1000 0.0401 207 P(rel=3)@5 0.2000 207 nDCG@20 0.4239 207 AP(rel=3)@1000 0.1772 237 P(rel=3)@5 0.0000 237 nDCG@20 0.1713 237 AP(rel=3)@1000 0.0471 280 P(rel=3)@5 0.4000 280 nDCG@20 0.7026 280 AP(rel=3)@1000 0.5237 239 P(rel=3)@5 0.4000 239 nDCG@20 0.4327 239 AP(rel=3)@1000 0.2515 277 P(rel=3)@5 0.8000 277 nDCG@20 0.8011 277 AP(rel=3)@1000 0.6870 246 P(rel=3)@5 0.4000 246 nDCG@20 0.6937 246 AP(rel=3)@1000 0.5000 254 P(rel=3)@5 0.4000 254 nDCG@20 0.7762 254 AP(rel=3)@1000 0.8333 238 P(rel=3)@5 0.6000 238 nDCG@20 0.5614 238 AP(rel=3)@1000 0.3987 252 P(rel=3)@5 0.6000 252 nDCG@20 0.5329 252 AP(rel=3)@1000 0.4727 273 P(rel=3)@5 0.6000 273 nDCG@20 0.4287 273 AP(rel=3)@1000 0.3130 286 P(rel=3)@5 0.2000 286 nDCG@20 0.1668 286 AP(rel=3)@1000 0.0652 206 P(rel=3)@5 0.0000 206 nDCG@20 0.0521 206 AP(rel=3)@1000 0.0018 267 P(rel=3)@5 0.2000 267 nDCG@20 0.5863 267 AP(rel=3)@1000 0.3839 247 P(rel=3)@5 0.4000 247 nDCG@20 0.4566 247 AP(rel=3)@1000 0.2067 294 P(rel=3)@5 0.2000 294 nDCG@20 0.3598 294 AP(rel=3)@1000 0.2507 298 P(rel=3)@5 0.8000 298 nDCG@20 0.4022 298 AP(rel=3)@1000 0.2011 263 P(rel=3)@5 1.0000 263 nDCG@20 0.6866 263 AP(rel=3)@1000 0.6838 229 P(rel=3)@5 0.2000 229 nDCG@20 0.5563 229 AP(rel=3)@1000 0.5000 219 P(rel=3)@5 0.2000 219 nDCG@20 0.4855 219 AP(rel=3)@1000 0.2000 261 P(rel=3)@5 0.0000 261 nDCG@20 0.0000 261 AP(rel=3)@1000 0.0000 210 P(rel=3)@5 0.6000 210 nDCG@20 0.3348 210 AP(rel=3)@1000 0.0871 232 P(rel=3)@5 0.6000 232 nDCG@20 0.4977 232 AP(rel=3)@1000 0.2118 262 P(rel=3)@5 0.8000 262 nDCG@20 0.8064 262 AP(rel=3)@1000 0.8833 214 P(rel=3)@5 1.0000 214 nDCG@20 0.7765 214 AP(rel=3)@1000 0.7272 270 P(rel=3)@5 0.8000 270 nDCG@20 0.7368 270 AP(rel=3)@1000 0.6768 240 P(rel=3)@5 0.6000 240 nDCG@20 0.8111 240 AP(rel=3)@1000 0.5612 200 P(rel=3)@5 0.2000 200 nDCG@20 0.4207 200 AP(rel=3)@1000 0.2455 300 P(rel=3)@5 0.4000 300 nDCG@20 0.5317 300 AP(rel=3)@1000 0.3836 228 P(rel=3)@5 0.0000 228 nDCG@20 0.3454 228 AP(rel=3)@1000 0.0902 233 P(rel=3)@5 0.4000 233 nDCG@20 0.6698 233 AP(rel=3)@1000 0.5409 235 P(rel=3)@5 0.0000 235 nDCG@20 0.0439 235 AP(rel=3)@1000 0.0000 296 P(rel=3)@5 0.4000 296 nDCG@20 0.8051 296 AP(rel=3)@1000 1.0000 208 P(rel=3)@5 0.0000 208 nDCG@20 0.1468 208 AP(rel=3)@1000 0.0404 236 P@5 0.8000 236 AP@1000 0.4049 302 P@5 0.6000 302 AP@1000 0.2863 269 P@5 1.0000 269 AP@1000 0.7471 266 P@5 0.2000 266 AP@1000 0.0283 284 P@5 0.0000 284 AP@1000 0.0588 242 P@5 0.2000 242 AP@1000 0.0808 291 P@5 0.2000 291 AP@1000 0.2133 225 P@5 1.0000 225 AP@1000 0.8434 283 P@5 0.4000 283 AP@1000 0.1754 221 P@5 0.8000 221 AP@1000 0.4293 215 P@5 0.8000 215 AP@1000 0.7594 222 P@5 0.2000 222 AP@1000 0.2692 293 P@5 0.0000 293 AP@1000 0.0011 276 P@5 0.6000 276 AP@1000 0.7960 203 P@5 1.0000 203 AP@1000 0.3212 245 P@5 0.0000 245 AP@1000 0.0647 212 P@5 0.6000 212 AP@1000 0.4195 218 P@5 0.2000 218 AP@1000 0.2578 223 P@5 0.2000 223 AP@1000 0.0980 256 P@5 0.6000 256 AP@1000 0.4148 250 P@5 0.8000 250 AP@1000 0.3227 299 P@5 0.4000 299 AP@1000 0.3105 204 P@5 0.0000 204 AP@1000 0.0824 211 P@5 0.8000 211 AP@1000 0.5738 224 P@5 0.4000 224 AP@1000 0.1871 272 P@5 0.6000 272 AP@1000 0.2945 227 P@5 0.2000 227 AP@1000 0.3421 205 P@5 1.0000 205 AP@1000 0.5857 226 P@5 0.6000 226 AP@1000 0.1914 264 P@5 0.0000 264 AP@1000 0.0196 202 P@5 0.4000 202 AP@1000 0.1828 290 P@5 0.6000 290 AP@1000 0.1463 257 P@5 0.6000 257 AP@1000 0.7929 281 P@5 1.0000 281 AP@1000 0.6598 248 P@5 0.6000 248 AP@1000 0.3160 289 P@5 0.4000 289 AP@1000 0.1216 278 P@5 0.8000 278 AP@1000 0.4214 301 P@5 1.0000 301 AP@1000 0.3690 216 P@5 0.0000 216 AP@1000 0.0415 207 P@5 0.4000 207 AP@1000 0.5114 237 P@5 0.0000 237 AP@1000 0.0859 280 P@5 0.4000 280 AP@1000 0.5543 239 P@5 0.6000 239 AP@1000 0.3752 277 P@5 0.8000 277 AP@1000 0.6777 246 P@5 0.6000 246 AP@1000 0.5383 254 P@5 0.8000 254 AP@1000 0.5652 238 P@5 0.8000 238 AP@1000 0.3827 252 P@5 0.8000 252 AP@1000 0.5115 273 P@5 0.6000 273 AP@1000 0.2215 286 P@5 0.2000 286 AP@1000 0.0437 206 P@5 0.0000 206 AP@1000 0.0436 267 P@5 0.4000 267 AP@1000 0.4761 247 P@5 0.8000 247 AP@1000 0.2993 294 P@5 0.4000 294 AP@1000 0.2795 298 P@5 0.8000 298 AP@1000 0.1894 263 P@5 1.0000 263 AP@1000 0.6004 229 P@5 0.2000 229 AP@1000 0.3367 219 P@5 0.6000 219 AP@1000 0.3345 261 P@5 0.0000 261 AP@1000 0.0070 210 P@5 0.6000 210 AP@1000 0.1429 232 P@5 0.8000 232 AP@1000 0.2672 262 P@5 1.0000 262 AP@1000 0.5251 214 P@5 1.0000 214 AP@1000 0.8504 270 P@5 1.0000 270 AP@1000 0.5165 240 P@5 1.0000 240 AP@1000 0.8233 200 P@5 0.2000 200 AP@1000 0.3053 300 P@5 0.4000 300 AP@1000 0.3102 228 P@5 0.8000 228 AP@1000 0.3669 233 P@5 0.8000 233 AP@1000 0.4908 235 P@5 0.2000 235 AP@1000 0.0276 296 P@5 0.6000 296 AP@1000 0.7492 208 P@5 0.0000 208 AP@1000 0.0427 all nDCG@20 0.4778 all P@5 0.5306 all AP@1000 0.3484 all P(rel=3)@5 0.3972 all AP(rel=3)@1000 0.3742