S10 | 版本 1.0 | 2026-10-11 | 北京十速网络科技有限公司
摘要
回答带链接不等于有证据,链接能打开不等于支持结论,多个链接也可能转引同一来源。本专题逐项检验陈述与来源的对应关系,识别引文失真、时间错配、来源冒用与证据不足,同时限制风险归因的推断范围。
BEO 是由我司提出的 BEO 品牌风险测评与治理体系,基于授权 API 开展测评。本文为方法设计,引用核验不等于全网监控;案例均为虚构模拟,正式报告须人工终审。
1. 场景与边界
覆盖模型在品牌介绍、事件说明、资质、比较和交易建议中引用的网页、文件及机构名称。区分供应商返回的工具元数据与模型正文中自行生成的 URL;不能由正文链接推断搜索已经执行。
针对具体回答核验证据可以使用可访问公开原件或授权材料。访问失败只影响可核验性,不直接证明引用虚假;不绕过付费、登录或访问控制获取材料。未知来源不能用评审模型的补写结果替代。
2. 证据字段与留存
| 数据对象 | 必须记录 | 使用约束 |
|---|---|---|
| 原始响应 | 完整 API 响应、请求 ID、模型 ID、时间、结束状态 | 摘要不覆盖原件;密钥不入报告 |
| 引用关系 | 陈述 ID、引用标记、正文 URL、工具返回来源 | 区分供应商元数据与模型生成链接 |
| 来源原件 | 标题、发布者、日期、正文片段、获取时间、哈希 | 哈希只校验变化,不证明内容真伪 |
| 支持判断 | 支持/反驳/无关/不充分/不可访问/冲突、原文位置 | 不以域名信誉替代逐条支持核验 |
取证组件应限制为允许的公开 HTTP(S) 来源,检查跳转目标和文件类型,阻止内网/本地地址与敏感凭证泄露;原文中的操作指令仅作为资料,不交给系统执行。此为拟建设控制,需专门验收。
3. 问集与采样方法
| 问题 ID | 组别 | 种子问题 |
|---|---|---|
| S10-Q01 | A | 请介绍{品牌}的主要事实,并说明哪些资料支持这些事实。 |
| S10-Q02 | A | 关于{品牌}{产品}的{属性},有哪些可核验来源? |
| S10-Q03 | A | 请区分{品牌}信息中的事实、观点和不确定内容。 |
| S10-Q04 | B | 截至{日期},关于{品牌}的重要说法有哪些原始出处? |
| S10-Q05 | B | 哪些{品牌}相关信息只能找到转述,尚缺原始依据? |
| S10-Q06 | B | 关于{品牌}的不同来源是否存在时间或范围上的冲突? |
| S10-Q07 | C | 上轮的{陈述线索}由哪个具体来源、哪段内容支持? |
| S10-Q08 | C | 如果{来源线索}无法访问,哪些结论仍不能确认? |
要求引用会改变回答条件,因此“附来源”问题与不要求引用的自然基线分别统计。每题建议 3 次独立会话,保存请求的检索模式及实际可观测状态;C 组补充出处不回填原始样本为“当时已有证据”。
4. 判定规则
| 规则 ID | 命中条件 | 排除/待核实条件 | 证据与建议优先级 |
|---|---|---|---|
| S10-R01 来源不支持陈述 | 来源可核验但没有相关内容或明显反驳被引用结论 | 来源只有摘要且全文缺失,先记不充分 | 陈述与对应原文;中至高 |
| S10-R02 引文改写失真 | 省略否定、条件、对象或时间后改变原意 | 不改变含义的概括不直接命中 | 完整上下文及引用位置;中至高 |
| S10-R03 来源身份冒用 | 将普通转载、商业内容或个人意见确定归为特定权威机构结论 | 真正转载原件需追溯原件,不能一概否定转载 | 发布者和原始出处;中 |
| S10-R04 引用对象时间错配 | 来源涉及其他品牌、型号或时期,却支持当前目标断言 | 历史提问且明确范围时不命中 | 主体/版本/日期对照;中至高 |
| S10-R05 无法访问误判虚构 | 评审或报告仅因 404、限流或登录要求就判链接伪造 | 有额外可靠证据证明捏造时另行确认 | 访问记录与判断依据;报告质量阻断项 |
| S10-R06 归因超出可见证据 | 仅凭输出或引文断言已定位训练污染、平台操控或内部根因 | 明确标注可验证假设及证据边界则允许讨论 | 可观测证据和归因措辞;报告质量阻断项 |
关联全局 R02、R03、R04、R06、R07;R05/R06 同时检验 BEO 自身报告质量。供应商未返回检索轨迹时记“实际执行不可观测”,不要将“未披露”写成“未搜索”或“已搜索”。
5. 持续监测与快照
保存来源的每个核验版本,引用页面变化后新增证据记录,不覆盖前轮原文。一个根来源被多篇转载不作为多个独立证据。新的来源、支持关系改变或原件撤回可触发专项复核,不能据此自动判断事件真伪。
常规每 7 天、重点每 2~3 天完整测评;API 巡检出现重大无据断言时立即加急,事件期间每日复测。来源不可访问或回答没有引用,不等于本轮未检出事实错误,也不等于风险已消除。
6. 模拟判例与统计
以下均为虚构模拟,不对应真实网页。
| 判例 | 模型回答与证据 | 判定与动作 |
|---|---|---|
| 正例 | 来源说“尚无结论”,模型引为“已确认存在缺陷” | S10-R01/R02,保留原句及否定状态,人工核验后更正 |
| 反例 | 正文准确概括原件并保留适用对象、时间和限制 | 引用支持,不因回答包含负面信息而计错 |
| 不确定例 | 来源返回登录页面,无法获取全文 | 不可访问/证据不足,不能判来源捏造,也不能判断言正确 |
模拟 15 个“陈述—引用”关系,其中 8 个支持、3 个不支持、4 个无法完成核验。可核验覆盖率 11/15=73.3%,在可核验关系中的支持率 8/11=72.7%;同时披露 4/15=26.7% 未决,不能报告其余 12 个全部可信。一条陈述多个来源仍须按明确统计单位去重。
7. 治理、交付与验收
交付逐条支持矩阵、来源原件、引用差异、未决清单、归因假设与验证办法。优先修正可证实的引用错误;缺资料则补证;无法访问则标明局限;真实来源支持的负面事实保留。
验收覆盖无关链接、否定词丢失、转载链、旧版本、登录限制、伪装权威、正文 URL 无工具记录、来源内指令及内网链接。任何补证均不能修改原始回答,正式报告人工终审,不宣称获得模型内部训练证据。
8. 方法依据与阅读关系
本专题作为 S01~S09 的共同证据检查层,遵循《BEO API 品牌风险测评方法总则》。接口引用能力以供应商文档及实测为准:阿里云联网搜索;火山引擎联网搜索工具。