模型任务表现受框架影响
Reddit用户称在Kubernetes issue分类任务中,4B模型同权重、同数据、同评分器下,仅调整评测/执行框架设计就使准确率从60%升至82%。影响因素包括规则位置、材料顺序、推理轮次与上下文保留方式,提示小模型能力评估需重视harness设计。
事件进展(1 篇报道)
-
2026-08-01 05:47
Reddit用户称在Kubernetes issue分类任务中,4B模型同权重、同数据、同评分器下,仅调整评测/执行框架设计就使准确率从60%升至82%。影响因素包括规则位置、材料顺序、推理轮次与上下文保留方式,提示小模型能力评估需重视harness设计。