| { | |
| "dataset": "cqadupstack", | |
| "split": "test", | |
| "metric": "dot", | |
| "norm_query": false, | |
| "norm_doc": false, | |
| "scores": { | |
| "ndcg": { | |
| "NDCG@1": 0.19809666666666667, | |
| "NDCG@3": 0.23345500000000005, | |
| "NDCG@5": 0.2504741666666667, | |
| "NDCG@10": 0.27104833333333334, | |
| "NDCG@20": 0.2886541666666667, | |
| "NDCG@50": 0.30863666666666667, | |
| "NDCG@100": 0.3212183333333334, | |
| "NDCG@200": 0.33208166666666666, | |
| "NDCG@1000": 0.3511625 | |
| }, | |
| "map": { | |
| "MAP@1": 0.1654, | |
| "MAP@3": 0.20855, | |
| "MAP@5": 0.22002999999999998, | |
| "MAP@10": 0.22955166666666668, | |
| "MAP@20": 0.23495, | |
| "MAP@50": 0.23854166666666665, | |
| "MAP@100": 0.23986416666666666, | |
| "MAP@200": 0.24057000000000003, | |
| "MAP@1000": 0.2411416666666667 | |
| }, | |
| "precision": { | |
| "P@1": 0.19809666666666667, | |
| "P@3": 0.108695, | |
| "P@5": 0.07816833333333333, | |
| "P@10": 0.048558333333333335, | |
| "P@20": 0.02945083333333333, | |
| "P@50": 0.014938333333333333, | |
| "P@100": 0.008753333333333333, | |
| "P@200": 0.005055833333333333, | |
| "P@1000": 0.0013183333333333335 | |
| }, | |
| "recall": { | |
| "Recall@1": 0.1654, | |
| "Recall@3": 0.25717249999999997, | |
| "Recall@5": 0.3013466666666666, | |
| "Recall@10": 0.363245, | |
| "Recall@20": 0.4280566666666667, | |
| "Recall@50": 0.5195883333333333, | |
| "Recall@100": 0.5892308333333333, | |
| "Recall@200": 0.6581233333333333, | |
| "Recall@1000": 0.8043724999999999 | |
| }, | |
| "mrr": { | |
| "MRR@1": 0.19809666666666667, | |
| "MRR@3": 0.24325333333333332, | |
| "MRR@5": 0.2542508333333333, | |
| "MRR@10": 0.26318499999999995, | |
| "MRR@20": 0.26818166666666665, | |
| "MRR@50": 0.27129416666666667, | |
| "MRR@100": 0.2722625, | |
| "MRR@200": 0.2727116666666667, | |
| "MRR@1000": 0.2730533333333333 | |
| }, | |
| "recall_cap": { | |
| "R_cap@1": 0.19809666666666667, | |
| "R_cap@3": 0.2632625, | |
| "R_cap@5": 0.3038458333333333, | |
| "R_cap@10": 0.3642008333333333, | |
| "R_cap@20": 0.4284308333333333, | |
| "R_cap@50": 0.5197316666666667, | |
| "R_cap@100": 0.589295, | |
| "R_cap@200": 0.6581308333333333, | |
| "R_cap@1000": 0.8043724999999999 | |
| }, | |
| "hole": { | |
| "Hole@1": 0.7261233333333333, | |
| "Hole@3": 0.8101108333333334, | |
| "Hole@5": 0.8371108333333334, | |
| "Hole@10": 0.8659116666666665, | |
| "Hole@20": 0.8852641666666666, | |
| "Hole@50": 0.9005008333333332, | |
| "Hole@100": 0.9082033333333333, | |
| "Hole@200": 0.914135, | |
| "Hole@1000": 0.9236383333333332 | |
| } | |
| } | |
| } | |