选择试验页面,本质是先确定“拿哪一类页面去验证方案”,而不是先决定页面长什么样。对百度指数这类关键词,如果目标是比较两种处理方案,优先选已有一定曝光但尚未稳定的页面做试验,而不是全新页面或核心流量页。前者能较快看出差异,后者的波动容易被误读为方案效果。
试验页面的选择取决于你要验证什么。如果验证的是标题写法对点击的影响,页面需要有稳定展现;如果验证的是内容结构对停留和转化的影响,页面需要有真实访问。两者对页面的要求不同。因此第一步不是挑页面,而是把问题写成一句可判断的话,例如“把列表型段落改为问答型结构后,同一批查询的点击率是否变化”。问题越具体,页面范围越小。
可以把候选页面分成两类来比较。
如果两种方案差别很小,选第一类;如果方案涉及页面主题本身的变化,选第二类更干净。不要用首页或转化主路径页面做试验,一旦效果变差,代价难以承受。
按下面的顺序筛,通常能较快定下页面:
对照页的作用是减少外部波动带来的误判。如果找不到条件接近的页面,就延长观察周期,而不是直接下结论。
试验开始前先记录基线:展现、点击、平均停留、目标行为次数。改动后按同一口径对比,不要只看排名。排名变化可能来自抓取和索引环节,也可能来自竞争环境,不能单独作为方案有效的证据。若展现没变而点击变化,更可能是标题或摘要起作用;若展现本身变化,要先排查收录和查询匹配,而不是急着归因于内容结构。
假设某页面原来每天获得一定展现,改动两周后点击比例上升、停留时间同步上升,可以初步认为方案有效;如果点击上升但停留下降,需要检查新标题是否带来了不匹配的访问。这里的两周只是示意,实际周期取决于页面访问量,访问越少,需要观察的时间越长。
定下试验页后,先完整备份当前版本,再只改动一个变量,并记录改动日期和基线数据。等到数据量足够再判断,避免在几天内反复调整,否则无法区分是哪一次改动带来的结果。