---

name: A/B测试统计分析器 description: 为A/B测试实验执行统计分析 version: 1.0.0 category: 分析 skillId: SK-DEA-014 allowed-tools:

• Read
• Write
• Edit
• Glob
• Grep
• Bash

---

A/B测试统计分析器

概述

为A/B测试实验执行统计分析。该技能提供严谨的统计方法来确定实验的有效性和显著性。

能力

• 样本量计算
• 统计显著性检验
• 贝叶斯分析
• 序贯测试
• 多臂老虎机分析
• 细分分析
• 新颖性/首因效应检测
• SRM（样本比例不匹配）检测
• 置信区间计算
• 功效分析

输入模式

{
  "experimentData": {
    "control": "object",
    "variants": ["object"]
  },
  "metrics": [{
    "name": "string",
    "type": "conversion|continuous|ratio"
  }],
  "analysisType": "frequentist|bayesian|sequential"
}

输出模式

{
  "results": [{
    "metric": "string",
    "controlValue": "number",
    "variantValues": ["number"],
    "pValue": "number",
    "confidenceInterval": "object",
    "significant": "boolean"
  }],
  "srmCheck": "object",
  "recommendation": "string"
}

目标流程

• A/B测试流水线
• 特征库设置

使用指南

1. 提供对照组和变体的完整实验数据
2. 使用适当的类型定义指标
3. 根据需求选择分析方法论
4. 在解释结果前检查SRM

最佳实践

• 分析前始终检查样本比例不匹配
• 根据指标类型使用适当的统计检验
• 在考虑统计显著性的同时考虑实际显著性
• 考虑多重比较校正
• 记录假设和局限性