如何创建结果可衡量的 A/B 测试假设。
实验假设需要作用机制和可衡量结果。仅将变更描述为更吸引人,过于模糊,无法解释。
按任务需求调整流程。
描述观察到的问题、拟议变更及其可能影响行为的原因。上线前选择主要结果和护栏指标,明确测量时间窗口及决策规则。
- 你需要提供什么
- 当前转化问题和证据。
- 你会得到什么
- 附带预期作用机制与指标的优先实验。
查看输入和结果。
演示用输入和输出 · 教学示例,并非 WebAct 实时运行结果
示例 个输入项
Visitors copy a prompt but overlook the install link.
完整示例
Hypothesis: a nearby install action increases qualified setup visits. Measure clicks and activation separately.
将这份输入载入提示词,再复制到 WebAct 中尝试任务。实际结果可能与示例不同。
决策与问题排查。
假设应承诺变体一定胜出吗?
不应。提出可测试的预期,以及支持或质疑它所需的证据。正因为结果不确定,才需要实验。
为什么更多点击没有带来更多激活?
单独测量后续步骤。变体可能只吸引好奇心,却不改善符合目标的用户完成设置或成功使用的情况。
使用自己的资料试一试。
将任务提示词中的示例换成你的材料。保留所需条件,再把任务复制到 WebAct。
自定义并复制任务 ↑