最小采集单元
一条监测记录至少包含:品牌、问题、平台、模型、采集时间、状态和原始回答。若回答包含可识别链接,则同时保存引用链接。缺少原始回答的记录不能作为指标证据。
核心指标定义
品牌提及率
在有效回答中,明确出现目标品牌名称或确认别名的回答数,占有效回答总数的比例。
平均排名
只对品牌被明确列入推荐或比较序列的有效回答统计其出现顺序。没有被提及的回答不伪造排名。
内容引用率
有效回答中出现可核验来源链接的回答数,占有效回答总数的比例。普通文本提及但没有链接,不计为链接引用。
监测覆盖
成功采集数与应采集数同时展示。失败、超时、权限不足和预算限制保留原始状态,不记作成功。
什么是有效回答
平台成功返回、内容可读取、对应问题与模型可确认,并已保存原始回答的记录,才进入指标统计。错误页、空响应、测试占位符和模拟内容均不进入统计。
什么时候可以比较
前后批次只有在品牌、问题集、平台范围和统计规则基本一致时才具有可比性。模型版本或平台能力变化应单独记录,避免把外部变化误判成优化效果。
数据限制
- 生成式模型具有随机性,同一问题可能得到不同回答。
- 不同账户、地区、时间和联网能力可能影响返回内容。
- 引用链接存在变化或失效的可能,需要定期复核。
- 监测反映特定样本,不等于全部用户看到的结果。
结论边界:数据用于发现问题和观察变化,不应被包装为第三方平台的官方排名。