研究设计与证据等级:从个案到元分析
把一个漂亮的结论拆成可核对的研究设计。
学习证据 学完后,怎么核对?
把学习结果留在一个可以回看、可以复做的动作里;这一区只写学生能自己检查的证据。
如何核对
- 能在互动分诊台指出设计、混杂与可支持结论
- 提交一张证据链图和边界说明
适用边界
教学用分诊模型帮助比较推断边界;真实研究还需查阅原始论文、预注册、伦理审查与统计方法。
最后复核
这是内容复核日期,不是学习截止日期。
讲
先问「能推出什么」,再谈「排第几」
问题先行「这项干预是否造成结果?」与「某群体现在是什么样?」不是同一个问题。研究设计像一副量身定做的尺:个案把一条经历记清楚,横断面把同一时点的变量放在一起,实验把干预和比较组安排好,系统综述与元分析把多项研究的差异和共同结果摆上桌。没有脱离问题的万能等级表。
四个词读研究摘要时,圈出四个动作:谁被研究、何时测量、什么被分配或观察、哪些替代解释被挡住。随后把结论改写成与设计相称的动词:个案「提示」、横断面「显示关联」、实验「估计在此条件下的平均差异」、综述「综合纳入研究的总体模式」。
| 设计 | 观察/安排 | 通常能支持的说法 | 不能自动推出/要查什么 |
|---|---|---|---|
| 个案(case study) | 对一个人、一个组织或一个事件做有时间线的深入记录;可以包含访谈、文件和重复测量。 | 说明个别情境的过程、机制线索或反常现象;帮助生成可检验假设。 | 不能估计总体发生率或平均干预效果;要查选择理由、资料三角验证、替代解释与伦理。 |
| 横断面(cross-sectional) | 在一个时间窗同时测量暴露/特征与结果,不由研究者分配干预。 | 描述此时的分布,或在样本中发现变量的关联。 | 时间先后不清,反向因果与混杂可能存在;要查抽样、无回答、测量工具与代表性。 |
| 实验(experiment) | 研究者分配干预与比较条件;随机化若执行良好,可平均平衡已知和未知混杂。 | 在指定人群、剂量、结局和随访期内,估计干预造成的平均差异。 | 不自动外推到所有人、长期或真实场景;要查依从、失访、盲法、测量、效应不确定性与伦理可行性。 |
| 系统综述/元分析 | 按预先说明的检索、筛选与质量评估汇总多项研究;元分析进一步做统计合并。 | 展示纳入研究的总体效应、精度、异质性与证据缺口。 | 不是免检的“塔尖”:纳入研究质量、发表偏倚、选择标准、结局混合和模型选择都会改变结论;要回看森林图、异质性与敏感性分析。 |
因果图把「X 是否影响 Y」画成箭头,还要把同时指向 X 与 Y 的变量圈出来。比如晚间关闭通知(X)与睡眠质量(Y)之间,考试周压力、基线失眠和作息类型可能是混杂;睡前仪式(M)可能是中介。控制变量不是越多越好:把碰撞点或干预后的变量硬塞进模型,反而会打开偏差路径。
例
同一条漂亮句子,换一个研究设计,能走的距离就不同。下面两个常见例和一个易错例,先读主张,再看它有没有越过设计边界。
研究者连续记录一名学生把手机通知关掉 14 天后的睡眠日记、入睡时间和访谈。学生的入睡时间变短,研究者写道:「关闭通知可能减少睡前唤醒,值得做更大研究。」这个说法守住了边界:时间线和多种资料让机制假设更具体,却没有把一人的变化写成「对大学生有效」。下一步可以设计有比较条件的实验,或先做明确抽样的横断面调查。
一项在同一周完成的校园问卷发现,报告「睡眠差」的学生更常说自己在床上刷短视频。它适合写成「本样本中两者相关」,也能提醒研究者测量压力、课程负担和作息;但无法判断是刷视频导致睡差,还是睡差的人更愿意刷视频。若要估计干预效果,应在伦理允许和执行可行时采用随机分配,并预先规定结局与随访期。
一篇元分析合并 28 项研究,报告「关闭通知平均改善睡眠 12 分」。小林马上说:「元分析最高级,所以每个人都会改善 12 分。」错在两处:第一,平均效应是纳入人群、干预强度和结局量表下的估计,不是个人保证;第二,要看研究间异质性、风险偏倚、发表偏倚和敏感性分析。若不同年龄、不同量表被硬合在一起,数字的精确外观甚至会掩盖问题。
证据链/因果图分诊台
观察一张因果图,点击左侧研究设计节点;再选择或拖拽证据卡到对应节点。读数会即时更新因果链、混杂变量、可支持结论和适用边界。完成至少四张卡后复盘,留下可提交的证据链图。
图例:实线是可检验的路径,虚线是尚未被设计排除的直接路径;金色节点是同时影响 X 与 Y 的候选混杂。点击设计节点,观察哪些路径和边界会亮起。
证据卡 · 选中设计后再放置
点击卡片即可归位;支持拖拽到上方任一设计节点。
先观察图:箭头显示 X、M、Y 和候选混杂;点击一个研究设计节点开始操作。
复盘清单 · 可直接提交为学习证据
- 设计:—;写出它能回答的一个问题。
- 因果链:—;圈出至少一个仍未排除的替代解释。
- 边界句:「在
指定人群/时间窗/结局下,这项设计支持条件化结论,不支持把结果外推到未研究情境。」
静态后路:不运行脚本时怎么做?
- 把四种设计按“观察/安排”与“结论动词”对照表读一遍。
- 在纸上画 X→Y,补上同时指向两者的混杂;再给每张证据卡写“能支持/不能支持”。
- 最后用复盘句式写出人群、时间窗、结局和一个未解决的替代解释。
把证据链部件装回研究设计
从下方拿起部件,放进对应槽位;每次放置都显示推断边界。它与上面的 2D 分诊图使用同一情境,完成后再回看你的边界句。
互动版需要运行脚本(本地 HTTP 预览);不运行脚本时,上面的静态例子和表格已包含同样的内容。
做
研究者想回答「把晚间通知关掉,是否会让本校大一生在两周后睡得更好?」哪一项最贴近这个因果问题?
- 从一篇你正在读的论文或报道中,抄下它的研究问题、样本、测量时间和研究者是否分配了干预。
- 在纸上画一条 X → Y,再补两个可能同时影响 X 与 Y 的混杂;标注一个可能的中介或碰撞点,并说明为什么不随意控制它。
- 用「能支持/不能支持」两栏写结论:至少包含人群、时间窗、结局和一个未解决的替代解释;不要使用“对所有人有效”等绝对句。
- 把工作单与互动分诊台的复盘句互相核对,提交一张证据链图(纸笔或 SVG 截图均可)和 100–150 字边界说明。
怎么算过关:四种设计至少各举出一个适用问题;因果图中能指出一条混杂路径;结论句没有越过研究人群与时间窗;引用的论文或数据有可核查出处。
适用边界:本练习用合成情境演示推断逻辑,不替代真实研究的功效分析、预注册、伦理审查、缺失数据处理和领域专业判断。
卡
为什么不能把「元分析」直接翻译成“最高级证据”?
元分析汇总的是符合纳入标准的研究;结论仍受原始研究质量、发表偏倚、异质性、结局与模型选择限制。先问问题和设计是否匹配,再查执行质量与适用人群;等级是条件化的起点,不是绝对排名。
- 个案能把机制和过程讲清楚,通常不能估计总体或平均效果。
- 横断面适合描述分布和关联;时间顺序、反向因果与混杂仍需处理。
- 实验在指定条件下更适合估计因果差异;随机化不等于自动外推。
- 系统综述/元分析展示总体与异质性,但名称不保证质量,也不替代原始研究核查。