创建实验
在开始之前
- 安装 SDK 并在您的代码中检查实验。
- 导入用户操作数据作为度量实验影响的指标源。
在哪里创建？
转到左侧边栏的 实验 部分，选择 "实验"，然后点击 创建 按钮。
填写基本信息
● 实验 ID
ID 只能包含字母、数字和下划线，例如，exp_image_optimization。
● 所有者
实验创建者是默认所有者，可以根据需要添加额外的所有者，以便通过过滤进行实验管理。
● 高级（可选）-- 添加层级
默认情况下，会自动为您当前的实验创建一个包含 100% 流量的专用层级，可以在 "实验 -- 层级" 下找到。通过勾选 "添加层级" 选项，您可以避免潜在的流量饥饿问题。您可以在此处选择在 "实验 -- 层级" 下创建的层级。您也可以直接在此页面上创建一个。有关层级的更多信息，请参阅 ABetterChoice.ai。
设置实验目标
● 假设
描述您的实验计划的变化和理由。例如，基于数据分析，将 [xxx 功能] 从 [xxx] 改变为 [xxx] 预计会提高 xxx（效果）。[xxx 指标] 可以量化改进。
● 选择指标
只允许一个主要指标，作为验证效益的核心指标。可以添加多个次要指标来评估与功能相关的效益。
● 如何添加指标？
在左侧选中所需的指标，它们将出现在右侧。点击右侧的星形图标选择主要指标，它将显示在上方（红色框）。要取消选择一个指标，点击 "x" 按钮或使用图标（蓝色框）清除所有选择。
分配和分组
● 流量分配
- 总流量百分比：确定用户参与实验的程度。如果在步骤 2 中选择了层级，分配的流量将不超过层级中定义的最大值。默认情况下，实验或层级的总流量设置为 100%。
- 添加组：点击右侧的图标（蓝色框）添加组。在一个实验中最多可以添加一百个组，至少需要一个组。组名、流量比例和参数值都是可编辑的。所有实验组的流量百分比之和应为 100%。组的实际流量 = 总流量百分比 * 组的流量比例。
- 添加参数：点击左侧的图标（蓝色框）添加参数。参数代表业务或功能策略。添加的数量无限制。
值格式限制： 1. 字符串：接受字符串、字母、数字和下划线。 2. 数字：接受正/负整数、0、小数和科学记数法。 3. 布尔值：FALSE 或 TRUE，控制组默认为 FALSE，治疗组默认为 TRUE。 4. Json：对象、数组、数字、字符串。它还允许嵌套结构，例如 {"test":{"service":{"ctr_model":0}}}。
● 白名单（可选）
帮助确保您正在测试的每个变体都按预期工作。通过点击 "添加组"（蓝色框）从上一步中选择并添加组。
● 目标受众（可选）
实验将仅针对指定受众中的用户。此外，您可以点击添加条件（蓝色框）添加多个条件，并在多个受众之间选择关系（AND/OR）。
完成创建并开始
点击 "创建" 按钮后，您将收到成功创建通知，实验将显示在 "实验 -- 实验" 页面上。在生成的页面中，您可以通过点击右上角的图标开始实验并执行其他操作。
