data-engineering-data-driven-feature
使用A/B测试构建数据驱动功能
此技能提供了一个全面的工作流程,用于通过数据洞察、A/B测试和持续测量来构建功能,并使用专门的AI代理进行分析、实验和实施。
Télécharger le ZIP du skill
Importer dans Claude
Allez dans Paramètres → Capacités → Skills → Importer un skill
Activez et commencez à utiliser
Tester
Utilisation de "data-engineering-data-driven-feature". 为新的结账流程优化启动数据驱动功能
Résultat attendu:
工作流程计划:(1)EDA阶段——分析当前转化漏斗,(2)假设——'简化结账将提高5%的转化率',(2)实验设计——2周测试,10%流量,主要指标:结账完成率,(4)分析——跟踪checkout_start、checkout_step_complete、checkout_abandon,(5)架构——LaunchDarkly功能标志,从5%开始渐进式推广
Utilisation de "data-engineering-data-driven-feature". 为推荐算法变更设计实验
Résultat attendu:
统计设计:每组需要50,000名用户样本量,以80%的功效检测2%的改进。主要指标:点击率,护栏指标:延迟、错误率。随机化:user_id哈希。分析:双尾t检验,使用Bonferroni校正处理多个指标。
Audit de sécurité
SûrAll 16 static findings are false positives. The skill is a legitimate data engineering workflow orchestrating specialized agents for data analysis, hypothesis development, A/B testing, and statistical analysis. No external commands, cryptographic algorithms, or malicious code patterns are present.
Problèmes à risque élevé (1)
Problèmes à risque moyen (1)
Score de qualité
Ce que vous pouvez construire
产品经理规划实验
产品经理使用此工作流程来规划具有适当实验设计、成功指标定义和统计严谨性的数据驱动功能发布。
数据科学家结构化分析
数据科学家遵循此工作流程来构建A/B测试,使用ICE或RICE评分定义假设,并进行适当的统计分析。
工程师实施功能标志
后端工程师使用此工作流程来实施功能标志、配置渐进式推广,并从一开始就设置适当的分析工具。
Essayez ces prompts
使用data-engineering-data-driven-feature技能帮助我规划一个新功能。功能是:[描述您的功能创意]。我想用A/B测试来验证它,并衡量它对[关键业务指标]的影响。
我需要为[功能名称]设计一个A/B测试。帮助我创建一个统计实验设计,包括样本量计算、成功指标和护栏指标。目标指标是[指标],预期改进是[百分比]。
帮助我为[功能]设计全面的分析工具。我需要跟踪用户交互,包括[列出事件]。为[Amplitude/Mixpanel/Segment]中的细分推荐事件模式和属性。
我们的[功能]A/B测试已完成,[时间周期]内共有[样本量]名用户。实验组显示[结果]。帮助我进行统计分析,计算显著性,并评估业务影响。
Bonnes pratiques
- 在开始开发之前定义成功指标和护栏指标,以避免p-hacking
- 从5-10%的流量开始渐进式推广,在增加之前监控错误率
- 运行完整的周周期实验,以考虑星期几的影响
- 记录所有决策和学习,供未来功能开发周期参考
Éviter
- 在没有预定义成功标准的情况下运行实验,并临时做决定
- 从全流量推广开始而不是渐进式推广,从而导致大规模问题
- 忽略护栏指标并部署损害用户体验的更改
- 在结果看起来有希望时提前结束实验,而没有适当的统计功效