QELAI GUIDE
品牌 AI 可见度应该怎样评估?
给品牌提及、官网引用、失败率和事实核验明确分母;用标注为示例的算例解释结果。
最后审核: · 审核主体:客来运营团队先固定采样单位与比较条件
建议以“平台产品 × 问题 × 重复运行”为一条观察。保存问题原文、平台与模型或产品版本、网页/API、联网开关、采样地区、账号状态和时间。不同执行方式分别报告。
发现类问题不包含自有品牌;“客来、QELAI 与 Qentrix 是什么关系”属于品牌知识核验,单独分组。不要把品牌诱导题混入非品牌发现率。
定义分子、分母与无法计算的情况
先识别有效回答和执行失败,再计算比率。若没有有效回答,展示“无有效样本/无法计算”,不将它解释为品牌可见度为零。
| 指标 | 计算方式 | 不可替代的含义 |
|---|---|---|
| 品牌提及率 | 提及指定品牌的有效回答数 ÷ 有效回答总数 | 名称出现,不代表正面推荐 |
| 官网引用率 | 附有经核实官网来源链接的有效回答数 ÷ 有效回答总数 | 官网链接被使用,不代表全部事实正确 |
| 失败率 | 失败的执行次数 ÷ 计划执行次数 | 反映采集缺口,不能悄悄从报告删除 |
| 官网引用平台覆盖率 | 至少有一次官网引用的平台数 ÷ 纳入的平台数 | 按平台计数,不能冒充按回答计数的官网引用率 |
| 事实核验 | 逐条标注正确、错误、无法确认及核对依据 | 无法确认与明确错误应分开 |
用一个示例检查计算是否一致
以下全部为算例,不是客来或任何客户的实际效果:计划运行 20 次,18 次取得有效回答,2 次执行失败;其中 6 条提及品牌,3 条引用官网。则品牌提及率为 6/18≈33.3%,官网引用率为 3/18≈16.7%,失败率为 2/20=10%。
即使 3 条引用都来自同一个平台,官网引用平台覆盖率也应按平台数另算。原始分子和分母要和百分比同时显示,不仅展示四舍五入后的分数。
逐条保存引用,并核对它支持了什么
回答中出现一个网址,不足以证明某句话有依据。打开来源页检查是否可访问、是否属于正确主体、是否真正支持相关陈述;同名企业和重定向后的错误域名应单独标记。
- 保留完整回答、官网引用 URL、引用附近的事实和采样时间。
- 品牌别名先建核对表;同名词、广告性表达与负面提及不要混同正面推荐。
- 来源不存在或事实无法验证时标记“不确定”,不得自行补写缺失证据。
- 公开样例先取得授权并去除账号、联系方式和第三方私密内容。
前后复测报告同时呈现改善和没有改善
在条件尽量一致时重复测试,按平台与问题分别展示结果。某些问题提升、另一些下降时,两者都保留;若平台或模型更换,建立新分组,不继续沿用旧曲线。
小样本中的一次变化可能来自随机性或检索更新。页面技术修复、搜索收录和 AI 回答变化分开报告;没有对照设计时,不把相关变化写成确定的因果提升。
- 冻结原问题集与执行配置。
- 记录改动 URL、内容版本与时间。
- 重复执行并保存全部成功、失败和原文。
- 分别核对提及、引用、事实与业务咨询,不拼成无依据的综合分。
可复用模板
模板用于记录自己的资料与观察,示例不代表真实客户或效果数据。
- 下载逐条观察记录模板(CSV) — 空白记录模板,不含真实客户或测试结果。