行业
PremiseCheck: Efficient Fact-Checking of Human and AI Peer Reviews
提出 ReviewFact 基准与 PremiseCheck 框架,用于检测人类或 AI 审稿意见中对论文内容的事实性误述。做法是让 LLM 将评论改写为显式前提,再用廉价判定模型逐条对照论文核验,在 NLP、机器学习与自然科学三个领域以约一半成本达到前沿 LLM 的准确率。
行业落地·arXiv cs.CL·4 天前
先用站内已采集内容作答;站内不足时联网检索,每条结论都给出来源链接
1 条 · 点击可看原文全文与中文译文
提出 ReviewFact 基准与 PremiseCheck 框架,用于检测人类或 AI 审稿意见中对论文内容的事实性误述。做法是让 LLM 将评论改写为显式前提,再用廉价判定模型逐条对照论文核验,在 NLP、机器学习与自然科学三个领域以约一半成本达到前沿 LLM 的准确率。
现有资料不足以回答「PremiseCheck 的判定模型具体是什么规模、如何训练」这一问题。资料中只给出了框架层面的描述,没有披露判定模型的参数量、架构规模或训练方式。 资料中能确认的部分:
也就是说,资料仅说明判定模型被定位为「廉价」且成本约为前沿 LLM 的一半,但未说明其具体规模(参数量、是否基于小模型微调等)与训练细节(训练数据、目标函数、蒸馏或微调策略等)。这些信息需要查阅论文原文的方法章节才能确认。