跳转到主要内容
A/B 测试通过测试多达 10 个变体 并根据打开率和点击率等指标评估效果,帮助您优化消息。这使您能够提升用户参与度并做出数据驱动的消息决策。 专注于生命周期和增长的营销人员可以利用 A/B 测试的见解进行有影响力的改进,以配合更广泛的业务目标。无论您是测试推送通知还是邮件,A/B 测试都允许您尝试不同的设计、文案、行动号召(CTA)等。例如,测试:
  • 带图片的推送是否比纯文本表现更好
  • “领取优惠”这样的 CTA 是否比”开始使用”效果更好
  • 短主题行是否比长主题行获得更多打开次数

套餐可用性

  • 专业版和企业版套餐:最多 10 个变体
  • 免费版和增长版套餐2 个变体
比较套餐

A/B 测试工作原理

A/B 测试仅在通过控制台发送时可用。API 不支持此功能。要使用 Journeys 创建 A/B 测试,请使用 Journey 拆分分支
在通过控制台创建推送邮件营销活动时,点击 A/B 测试 按钮和 添加变体 来创建额外的测试。 您的受众(包含和排除的细分)将是所有符合营销活动条件的用户。 创建变体后,您可以选择受众的一部分来接收随机变体,例如 25% 意味着选定细分的 25% 将随机接收其中一个变体。有 2 个变体(A 和 B)且目标 25% 的消息将有 12.5% 的受众获得变体 A,另外 12.5% 获得变体 B。有 10 个变体(A-J)且目标 25% 的消息将有 2.5% 的用户获得每个变体。

显示变体百分比滑块的图片。

默认情况下,25% 的受众会收到 A/B 测试。为了获得有效结果,每个变体必须有足够的用户。使用的变体越多,测试组必须越大。如果设置为 100%,消息将平均发送给受众中的所有用户,并且无法将”获胜者”发送给剩余用户。

选择获胜者

作为 A/B 测试发送的消息将在 消息选项卡 下被标记。点击每个测试的报告查看完整报告或查看特定变体的报告。 我们提供一些统计数据供您查看效果并选择获胜者。下面的截图描述了如何查看不同统计数据并选择获胜变体。然后我们将把获胜变体发送给目标受众的所有剩余成员。

显示从 A/B 测试报告中选择获胜者功能的图片。


平台特定说明

  • 推送 A/B 测试
  • 邮件 A/B 测试

创建推送 A/B 测试

  1. 转到 消息 > 推送 > 新推送
  2. 命名您的消息(例如,“推送 AB 测试 - CTA 按钮”)
  3. 选择您的细分
  4. 点击 A/B 测试 按钮

显示 A/B 测试按钮的图片

  1. 添加变体
  • 点击 添加变体 来复制和编辑每个新版本。
  • 每次只更改 一个变量 以获得有意义的见解。

显示如何添加更多变体的图片

  1. A/B 测试设置
选择目标受众中应接收每个变体的百分比。更多详细信息请参见 A/B 测试工作原理百分比应用于总受众,在每个变体之间平均分配。示例:
  • 有 2 个变体的消息设置 25% 将向每个变体发送 12.5%。
  • 有 10 个变体的消息设置 25% 将向每个变体发送 2.5%。
  • 有 2 个变体的消息设置 50% 将向每个变体发送 25%。
  • 有 3 个变体的消息设置 50% 将向每个变体发送 16.67%。
  • 有 2 个变体的消息设置 100% 将向每个变体发送 50%。
  • 有 4 个变体的消息设置 100% 将向每个变体发送 25%。
除 100% 外的任何百分比都允许您选择获胜者。
  1. 查看结果
消息 > 推送 > A/B 测试选项卡 下查看结果。点击任何测试查看特定变体的报告。
  1. 选择获胜者
使用性能指标手动选择获胜者。

A/B 测试最佳实践

了解基准

查看过去的性能数据,以便有意义地评估测试成功。

设定目标和假设

清楚地定义您正在测试什么以及成功是什么样子。

一次只更改一个变量

通过隔离变量来控制您的实验,例如:
  • 主题行
  • 布局
  • CTA 文案
  • 文案长度
  • 图片
  • 优惠
  • 表情符号
  • 颜色
  • 字体
  • 图标
  • GIF

使用对照组

包含您的”常规”版本作为衡量改进的基线。 通过随机标记用户并排除该细分来创建对照组。您可以导出用户数据并从 CSV 导入创建细分。

同时测试

同时发送所有变体以避免时间偏差。

持续测试

基于结果进行迭代,持续优化消息效果。

常见问题

我可以对不同的细分进行 A/B 测试吗?

不能在标准消息表单中进行。但是,您可以使用带有 拆分分支是/否分支Journeys 来测试不同的细分。

我可以自动选择获胜者吗?

目前还不可以。您必须手动选择获胜变体或使用 100% 发送所有变体。
您完成了!现在您可以测试消息的不同变体并选择获胜者。
需要帮助?与我们的支持团队聊天或发送邮件至 support@onesignal.com请包含以下信息:
  • 您遇到的问题详情以及复现步骤(如有)
  • 您的 OneSignal 应用 ID
  • 外部 ID 或订阅 ID(如适用)
  • 您在 OneSignal 控制台中测试的消息 URL(如适用)
  • 任何相关的日志或错误信息
我们很乐意为您提供帮助!

I