4.10 实验卡:押→做→看→判→改(M17、P10、P11)
产品主张#
一张卡检验一条信念;预测、概率、小偏差宽度与执行预测只有本人能写;预注册锁定(哈希),改预测要新建卡;代码按预注册结果表判读;单卡最多 ±1 档;大偏差与相反走异常复核;三重闭合。
支撑理论#
- PDSAC(Deming, 1986;Langley 等, 2009):计划(含预测)→ 小规模执行 → 研究(比较预测与结果)→ 处置。Taylor 等(2014)发现医疗领域多数 PDSA 应用没有做到「有预测、有迭代、有数据」,做到的报告才可靠。实验卡把这三点做成了强制字段。
- 预注册B(Nosek 等, 2018):在看到数据之前锁定假设与分析方法,区分「预测」与「事后解释」。哈希锁定与「改预测要新建卡并写 supersedes」是预注册的个人版。
- 精益创业与科学化创业B(Ries, 2011;Camuffo 等, 2020;Gans, Stern & Wu, 2019):构建—测量—学习;把商业设想当成可检验的假设。
- 企业实验与在线对照实验A(Thomke, 2003;Kohavi, Tang & Xu, 2020):组织应把实验当作常规能力;可信的实验需要事先定义指标、样本量与护栏指标。
- 单被试设计与微随机试验B(Kazdin, 2011;Klasnja 等, 2015):在个人或小样本层面,用基线期—干预期、反转或多基线设计,或在个体内随机化,来区分干预效果与时间趋势。
- 竞争假设分析CD(Heuer, 1999)。
证据强度#
PDSA C;预注册在科研中的作用有元研究支持(B);Camuffo 2020 B;在线对照实验方法学成熟(A,限于可随机化的场景);单被试设计方法学成熟(B)。
理论给产品的提醒#
- 因果识别:当前实验卡多是「前后对比 + 竞争假设列表」,没有对照或随机化,判读结果「符合」并不能排除竞争假设。建议加入单被试设计的模板(AB、ABAB、多基线)和「同期改动清单」(M6 已经要求列出同期改动,这是好的起点;见 10.4)。
- 三重闭合和 PDSA 的「研究」步骤互相补强:状态闭合(数变了)≠ 因果闭合(是因为我做的事)≠ 价值闭合(值得)。这是产品对 PDSA 的实质性贡献,值得在对外表达中强调。
- 回报成本:决策记录 v0.6 自己诊断出「反馈的成本高于反馈的产出」和「单位里的动作碰不到现实」两个风险。实验文献的经验是:先保证有现实结果数据流入,再追求判读精度。「只记数的卡」与「每目标最多两条回报流」是正确方向(见 10.5)。
本页理论卡(6)
在概念 → 理论映射网络中查看全部关系。