验收时不能只看排名、抓取或点击是否回升,而要把“用户是否完成了任务”设成独立判据。假设一个情境:某产品把帮助页从“概念介绍”改成“如何完成退款”,搜索曝光和点击都上升,页面停留也变长,但客服收到的退款失败咨询没有下降。这时操作结果更像“吸引到了人”,而不是“帮人完成了任务”,验收应判为未通过,先查任务路径,再决定是否回退或继续改。
操作成功通常指页面被正常处理、能出现在结果里、用户愿意点进来;任务完成指用户进入后能按步骤达成目标,例如提交成功、找到正确入口、拿到所需材料。两层信号可能同时上升,也可能背离。若只把前者当验收通过,就会把“页面更会吸引点击”误判成“问题已解决”。
可用的区分证据包括:
验收表里应把任务侧放在“通过条件”,搜索侧放在“观察条件”。这样即使排名上升,只要任务侧没有改善,也不会直接宣布成功。
面对“看似成功但任务未完成”,常见两种做法:继续在原页面上加内容、加引导;或回退到改动前版本,另做任务路径。两者都合理,但适用条件不同。
继续优化适用于:页面方向正确,用户已到达正确页面,但在关键步骤卡住。比如假设退款帮助页点击上升,用户却反复搜索“退款入口在哪”,说明问题可能是步骤顺序或入口描述,而不是主题错。此时动作是补上可执行步骤、把入口写成用户能识别的名称,再观察同类咨询是否下降。代价是改动周期拉长,若方向本身错,会浪费更多时间。
回退适用于:任务未完成与改动直接相关,且继续加内容会放大误导。比如假设改版后用户点进来,却发现页面只讲政策、没有操作路径,停留虽长但提交量没变。此时动作是回到改动前版本,保留原有可用路径,再单独设计任务页。代价是放弃已获得的可见性收益,但能先止损。
取舍依据不是“哪个看起来更好”,而是:任务未完成是否由当前页面造成、继续改能否在有限轮次内验证、回退是否会破坏其他已成立的任务。若无法判断,先做小范围回退或对照,不要全量推翻。
假设某站把“发票申请”页从表单说明改成一段政策解释。两周后,该页曝光和点击上升,停留时间变长,但“发票申请失败”的站内搜索没有减少。验收会议出现分歧:一方认为数据变好,应继续加内容;另一方认为任务没完成,应回退。
把决策拆成三步:
这个情境里,继续加内容和回退都成立,但条件不同:前者要求断点局部、方向正确;后者要求方向偏离、继续加会加重误导。动作之后的结果决定下一步:若同类咨询下降,说明任务路径改善;若只是停留继续上升而任务信号不变,应停止把停留当成功证据。
一次改动前后比较,不能直接把变化归因于这次操作。季节、搜索需求变化、数据采集差异、其他渠道同时改动,都可能让曝光或点击变化。请求量、抓取量或某项统计归零,也不能单独证明处理正确,它可能是采集延迟、过滤规则变化或页面暂时不可达。
可操作的做法是:
验收结论应写成条件句:在什么前提下、哪类任务信号改善、哪类信号仍异常、下一步是继续、回退还是补测。这样即使结果看似成功,也不会把用户任务未完成漏过去。