A/B 测试:小站点如何做低成本的对照实验
流量不够也能做测试。三个前提、四种低成本改法、以及什么时候不该做测试。
A/B 测试的前提是"有足够的样本"。一个每天 50 个访问的站点,跑两周也测不出显著差异——这时候更有效的是"改明显的问题",而不是"做实验"。
三个前提
- 样本量:单个版本至少需要 100 次转化事件才能看出差异。日访问 100、转化率 3%,一天 3 次转化,需要 33 天。这就是为什么小站不适合做精细测试。
- 单一变量:一次只改一个东西。同时改标题和按钮颜色,测出来也不知道是哪个起作用。
- 随机分流:同一时间、同一来源的用户随机分到两个版本。不能"这周 A、下周 B"——周内波动会污染结果。
小站点的现实做法:先做"明显改进"
下面这四类改动,不需要测试,因为方向是确定的:
| 改动 | 为什么不需要测试 | 预期效果 |
|---|---|---|
| 减少表单字段(7 → 4) | 字段越少完成率越高,规律稳定 | 完成率 +20%–60% |
| 移动端固定电话按钮 | 减少操作步骤 | 电话点击 +50%–150% |
| 首屏加价格区间 | 减少无效咨询与跳出 | 停留时长上升 |
| 按钮文案具体化 | "获取诊断"优于"提交" | 点击率 +10%–30% |
这些是"最佳实践",不是"实验结论"。先把它们做完,再考虑测试。
可以测试的四件事
当流量足够(日访问 300 以上)时,值得测的是"有分歧"的东西:
- 首屏主张:强调"快"还是强调"便宜"还是强调"懂行业"。
- 价格展示方式:给区间 vs 给"起价" vs 完全不给。
- 表单位置:首屏 vs 案例后 vs 弹层。
- 案例顺序:同行业优先 vs 效果最强优先。
想让人帮你逐项看一遍?提交域名,48 小时内给出一份人工诊断——收录、结构、速度、TDK、内链、转化路径,标注问题与改法。免费获取诊断 →
怎么低成本实现
- 用服务端按 cookie 分流(A 版本 / B 版本各 50%),记录到统计工具的自定义维度。
- 没有开发资源时,用两个不同 URL 分别投放,对比同一时间段的转化率。
- 最简单的办法:改一版,观察四周,与改前四周对比。虽然不严谨,但对小站足够。
四个常见错误
- 测了一周就下结论:周内与周末行为差异很大,至少跑满两周。
- 同时改多个元素:无法归因。
- 只看转化率不看询盘质量:表单变简单了,提交量涨了,但全是垃圾询盘,等于没改善。
- 把季节性波动当成实验效果:节假日、行业旺季都会影响转化率,要跟去年同期比。
什么时候不该做测试
三个信号:日访问低于 200、转化率低于 1%、刚改版不到一个月。这三种情况下,数据噪声大于信号,做测试是浪费时间和信心。
这时候应该做的是:看用户录屏、看搜索词报告、直接打电话问几个没成交的客户。定性信息比定量数据更有用。