企业评估 GEO 服务时最难的一步是「用什么口径衡量」。本页公开我们在用的一套衡量口径。定义只要固定下来,任何人都能自己复测,而不必相信某一张截图。
一、样本:问题从哪来
监测问题不自己编,取自三个来源:客户所在行业的真实提问(客服与顾问记录)、搜索与问答平台的联想词、以及同行竞品被问得最多的表述。单个项目的样本量以问题库条数计,报告里会写明条数。
二、观测面:在哪些引擎里跑
对同一批问题,在客户目标客群实际在用的生成式引擎中逐一提问。每次记录:品牌是否被提及、排在第几位、答案引用了哪些来源、答案对品牌的描述是否准确。
三、指标定义
提及率=被提及的提问次数 ÷ 有效提问次数。首位率=品牌出现在答案首个推荐位置的次数 ÷ 有效提问次数。来源分布=引用链接按域名归并后的占比,用来看答案素材实际来自哪些站点。描述准确率=人工比对答案陈述与工商登记、资质、地址等公开事实一致的条数占比。稳定性=同一问题间隔复测,答案结论方向保持一致的比例。
四、复现要求
统计以轮次为单位:同一轮里相同问法在单一引擎中只计一次,避免把重复提问当成权重。问题清单、时间窗与指标定义随阶段记录一起公开,客户可以按同一份清单自行复测。
五、我们不会写进报告的东西
不做无法复现的效果承诺,不公布未标注时间窗与样本量的百分比,不用单条对话截图代替统计口径。这三条也是判断一份 GEO 报告是否可信的最低标准。