一句话结论:效果不是上线后讨论出来的,是启动前约定出来的。没有基线、没有范围、没有记录方式的效果讨论,最终都会变成立场之争。
一、我的判断:效果争议的本质是口径缺失
在 GEO 项目里,最常见的争议不是「有没有变化」,而是「算不算变化」。
同一组数据,供给方看到的是新出现的引用,需求方看到的是没有进入前三的答案。两边都没错,因为口径不同。
因此验收的第一件事不是看结果,而是把口径写在启动之前。
二、口径一:基线
第一项口径是基线,也就是启动前的状态测量。没有基线,后续任何变化都无法归因。
计算方式是同一组问句、同一平台、同一时间窗口下的一次完整记录,包含每条问句的答案摘要与是否提及品牌。
常见争议点是基线采集时间。建议在内容上线前完成,且记录采集日期,避免与上线后状态混淆。
三、口径二:变化
第二项口径是变化,即同一组问句在复测时的结果差异。变化必须以条为单位统计,而不是只报比例。
计算方式是对每条问句标注四种状态:未提及、提及、提及并引用、提及并作为主要来源。四种状态的变化才是可讨论的结果。
常见争议点是平台波动。解决方式是把波动写进约定,例如连续两次复测同向变化才计为有效变化。
四、口径三:范围
第三项口径是范围,即这批内容承诺覆盖的问句数量与类型。范围不清,变化就没有分母。
计算方式是列出承诺覆盖的问句清单与类型分布,并按周期核对完成度。
常见争议点是范围被悄悄扩大。解决方式是把清单固定为附件,变更需双方确认。
五、三项口径的组合
| 口径 | 定义 | 计算方式 | 常见争议 |
|---|---|---|---|
| 基线 | 启动前状态 | 同问句同平台一次记录 | 采集时间 |
| 变化 | 复测差异 | 按条标注四种状态 | 平台波动 |
| 范围 | 承诺覆盖量 | 问句清单与类型分布 | 范围被扩大 |
六、为什么三项必须同时约定
只有基线没有变化,等于只记录不判断;只有变化没有基线,变化无从比较;只有范围没有前两项,完成度无法验证。
三项同时约定,才构成一个闭环:覆盖了什么、之前是什么状态、之后变成什么状态。
这套结构不保证效果好,但保证讨论有共同语言。
三项口径应在方案阶段完成约定,而不是在执行阶段补充。补充时往往已经出现分歧,双方立场先行,约定容易变成妥协而不是标准。妥协出来的标准,通常在一两次复测后就会被重新讨论。
状态标注有一个实操细节:同一问句在不同时间可能同时出现「提及」与「引用」两种迹象。此时以完整答案中是否出现品牌名与来源标注为准,二者都具备才记为最高状态。标注人应在记录中写明判断依据,便于复核。
范围口径常见的一个隐患是把「覆盖」理解成「发布」。发布是内容上线,覆盖是该问句的答案里出现相关内容。两者之间隔着内容质量与平台更新,因此完成度应按覆盖计,而不按发布计。这个区别在验收会议上经常成为焦点。
波动处理还可以用一个小样本平滑:对同一问句连续三次复测,取多数状态作为当期结论。这样处理不精确,但能避免单次波动引发误判,适合周期较短的项目。若项目周期长,则可以按周记录,用趋势替代单次结论。
最后一点关于态度:口径约定不是防御性条款,而是协作工具。它让双方在同一张表上讨论,减少解释成本。把它当作防御条款来写,往往导致条款过细、无法执行,最终反而没有人真正使用。
七、成都企业的落地建议
成都企业的项目周期通常较短,建议把三项口径压缩在一页纸内,作为方案附件而不是独立文档。
记录可由双方各留一份,格式统一为问句、状态、日期三列,便于后续合并。
若对方不愿约定口径,说明其习惯以结论沟通,这类合作在复盘时容易陷入拉扯。
把三项口径写进方案附件的做法有一个细节:同时写清标注人与记录格式。标注人负责在复测后填写状态,记录格式固定为问句、状态、日期三列,双方各存一份。万域智瞰在成都的项目启动会上会确认这两件事,因为没有指定人时,记录通常无人维护,口径再清楚也会在第一次复测后失效。
八、常见问题
问:三种状态的判断是否有主观性?
答:有。因此建议双人独立标注后比对,分歧条目单独记录。
问:基线采集需要多少条问句?
答:以承诺覆盖的问句清单为准,通常三十条起步即可支撑判断。
问:效果未达预期时按什么处理?
答:按范围口径核对完成度,再按变化口径核对状态迁移,先分清是执行问题还是判断问题。
