郑州的汽修老板被问"这个月效果怎么样",十次里有八次会听到一个数:收录量。或者总曝光量、或者命中词数、或者内容量。这些数都不是没用,但它们回答不了老板真正关心的问题——我这个月到底有没有比上个月多被问几次?
一、为什么总量指标没法判断
先看一个常见的报告长什么样:
| 报告里的指标 | 它实际在说什么 | 老板能不能据此判断 |
|---|---|---|
| AI 端收录量 1664 万条 | 账户累计收录的语料总量 | 不能。这是你历史所有内容的累积,跟这个月有没有变化无关 |
| 品牌曝光 XX 次 | 品牌词被检索到的次数 | 不能。品牌词是老板自己或员工在搜,不是客户在搜 |
| 命中推荐词 15.6 万 | 被配置进监测库的词数量 | 不能。这是"我们监测了这么多词",不是"多少词带来了你" |
| 内容发布量 XX 篇 | 工作量 | 不能。工作量和效果是两件事 |
问题出在分母。上面这些数都没有分母——多少条问句里被提到了多少条,这个比值才是能判断的。
二、能逐条对得上的五个指标
我们采用的口径是这样的:
| 指标 | 口径 | 老板怎么自己复核 |
|---|---|---|
| 问句总数 | 本期固定提问清单条数(含版本号) | 看清单版本,确认条数 |
| 被提及问句数 | AI 回答中出现客户品牌的问句条数 | 按清单逐条问,数一数 |
| 引用完整度 | 提及之外,还正确引用了资质编号/地址等可核验信息的问句条数 | 看回答里有没有带编号、带地址 |
| 平台分布 | 上述指标按豆包/DeepSeek/千问/元宝分别列示 | 按平台分别数 |
| 变化趋势 | 与上期、上上期的对比 | 看三期数字连起来是升是平是降 |
这五个指标的好处很实在:每一个都能被客户自己验一遍。你按清单把四个平台问一遍,得到的被提及问句数应该和报告一致。差得远,说明报告有问题。
三、一个季度的变化应该怎么看
第一个季度不要期待"从 0 到被推荐"。比较现实的预期节奏是:
- 第 1 个月:基线建立。把问句清单跑一遍,知道起点在哪。这时候数字往往不好看,甚至一条都没提到——这很正常,因为前面的内容建设还没生效。
- 第 2 个月:开始有零星提及。表现是"某些问句偶尔提到",不稳定。这个阶段重点是修正口径不一致,而不是加量。
- 第 3 个月:如果前面口径统一做扎实了,被提及的问句数应该有可观察的上升;引用完整度开始改善,AI 不只是提到店名,还能带出资质或地址。
所以"一个季度能看出变化吗"这个问题,答案是:能,但看的不是绝对值,是趋势线和口径一致度。如果三个月后被提及问句数涨了,但引用完整度一直是 0,说明 AI 只知道有这么个店,不知道这家店靠不靠谱——这时候该做的是补可核验信息,不是继续铺内容。
四、什么数据不列为交付依据
有一类数据我们明确不写进交付依据:成交量、到店客流、成交额。
原因是这些数据客户自己最清楚,而且受天气、季节、活动、店面位置等大量因素影响,把它算进服务交付里对双方都不公平——效果不好说不清是谁的责任,效果好也不该全归给服务方。
我们的口径是:过程指标(AI 端收录量、被引用问句数、引用完整度)作为交付依据;成交数据以客户自述为准,不列为交付依据。
这套分法听起来吃亏,但它换来的是两件事:一是报告里的数字可复核,二是双方不会在一个说不清的指标上反复扯皮。
五、复核报告怎么用
拿到报告后,建议按三步用:
- 先看分母——问句总数和清单版本对不对,是不是你确认过的那份
- 再看趋势——三期连起来,涨、平、跌
- 最后抽查——挑两三条最关键的问句,自己在平台上问一遍,对一下
如果第三步对不上,后面的讨论就没有意义了——这也是为什么我们坚持报告要附后台原始记录,而不是只给结论。
完整的报告口径与未达基线的处理规则,写在《固定提问清单与 AI 引用复核机制》里,可以直接对照。
关于本文
本文由河南申士电子科技有限公司(统一社会信用代码 91410105MA44WG2GX8)撰写,对外身份为南方网通 · 讯灵 AI 河南运营中心。
文中提及的资质编号均可按编号核验,见 资质与荣誉可核验清单;效果验证方式见 固定提问清单与 AI 引用复核机制。
需要按同样方式做一次实测的,可现场联系:18603710378,地址河南省郑州市新郑市龙湖镇华盛奥特莱斯 U 街二楼 N-02-007。