跳到正文
Ecomwith

广告增量测试:哪些订单是真新增

  • 进阶
  • 55分钟
  • 免费注册可读

接上一课:广告素材测试:CTR 高但不出单怎么办

先从一个独立问题开始:不投,这些订单会少吗

假设一家面向美国东北部通勤者的独立站,主推 20oz 不锈钢保温杯。品牌词 Search 连续 14 天日预算 $100,实际花费 $1,260;平台把 $4,440 的转化价值记给广告,ROAS 是 3.52。报表有订单,不等于这些订单是新增。先固定对照和污染边界,再判断能否做正式 Holdout、轻量缩量观察,还是只能保留方向线索。

平台报表会记下广告拿到了多少功劳,却不会自动说明不投会少什么。先分清:能做正式 Holdout、只能做轻量缩量观察,还是样本太弱只能保留方向线索。

归因解决分功劳,增量解决是不是新增。广告预算越大,这两个问题越不能混在一起;样本不足时,只能说可能,不能说证明。

Holdout 不是为了否定平台,而是给预算会加一道纠偏:平台说赢了,业务是否也真的少不了它?

  • 能做: 正式 Holdout
  • 先观察: 轻量缩量观察
  • 不能证明: 只写方向线索

不投会少多少?

广告增量测试怎么做?先回答“不投会少什么”

在改预算前,先回答三件事:广告归因订单是不是新增,什么时候适合做 Holdout,以及平台 ROAS 很高但总订单没变时该先查什么。本篇把测试组与对照组、污染日志和 Shopify 业务读数接到同一条预算判断路径上。

把功劳和新增拆开

增量测试问的是:没有这笔花费,业务会少什么?

先固定 测试组、对照组、时间窗、业务结果、排除条件和污染边界。平台归因可以记录触点功劳,却不能替代“如果不投会怎样”的反事实比较。

保留 组别、投放变化、地区或人群、订单、利润、泄漏与污染记录。*样本不足时只能说方向线索,不能把相关性写成因果证明。*先选择正式 Holdout、轻量缩量观察或暂不下结论。

先证明测试设计能回答反事实,再把结果交给预算会议。

先用一句人话理解增量,再按需展开术语

先只抓住一句话:如果少投或不投这层广告,业务会少多少订单、新客或贡献利润?把一部分相近地区或人群暂时不受这次预算变化影响,再和继续投放的一组比较,才有机会回答这个问题。

练习 · 选一项

先练一步

免费注册可读 · 第 3-16 部分 · 14 个部分

会员内容:完整练习与记录

这一部分包含

  • 先问不投会少什么
  • 把功劳与新增分开
  • 样本不足只写方向

1 份清单

注册免费,登录后就能读这一部分。

正在确认你的会员权限…

本课完成情况

常见问题

广告增量测试到底是什么意思?

它问的是:这笔订单是不是广告新带来的,还是用户本来就会买。平台归因只说明广告拿到了多少功劳,增量测试要看如果少投或不投这一层广告,Shopify 总订单、新客和贡献利润会不会真的少。

归因和增量有什么区别?

归因是在 Meta、Google、GA4 或 Shopify 报表里分功劳;增量是在问不投会不会少结果。品牌词、再营销、老客和 PMax 混合流量最容易被归因高估,所以不能只用平台 ROAS 决定预算。

Holdout 是什么?

Holdout 是刻意留出一部分地区、人群、时间或需求层不接受这次广告变化,用它和继续投放的一组对照。它不是为了让报表变漂亮,而是为了判断广告到底有没有带来额外订单。

接下来学什么

回到归因对账和预算节奏,再决定增量测试的下一步。

增量验证回答广告是否带来新增需求。下一步先核对归因口径、业务总量和可比范围,再决定保留、缩量或重测。

回到主题 Hub: 广告分析路径

资料来源

版本与复核

  • 作者 卫染风
  • 发布
  • 更新
  • 复核
  • 下次复核

本次更新:补回常见问题,整理资料来源。