决策式重排序的本地实证评估:基于 Qwen3.5-4B 与 Laya 的 TREC DL 评测

本文考察以决策式模型替代生成式输出的重排序(rerank)思路,并在 TREC Deep Learning Track 2019 与 2020 段落数据上开展本地评测:一条路线使用 Qwen3.5-4B,以期望等级打分并经控制标签读取选项概率;另一条使用 Laya 的决策头。Qwen 在两套数据上均优于原始排序,而 Laya 各配置的改善有限;思维链与成对复核带来的边际收益很小,三问评分存在明显的概率单调性违例,批处理虽提升吞吐却伴随数值不一致。所有结果均为单次测量,结论仅适用于文中描述的实验条件。

站内搜索

没有找到内容!