Evaluating meta-analytic methods to detect selective reporting in the presence of dependent effect sizes.

I类和II类错误 单变量 统计 荟萃分析 出版偏见 计量经济学 统计假设检验 统计能力 样本量测定 回归分析 数学 多元统计 置信区间 医学 内科学
作者
Melissa A. Rodgers,James Eric Pustejovsky
出处
期刊:Psychological Methods [American Psychological Association]
卷期号:26 (2): 141-160 被引量:553
标识
DOI:10.1037/met0000300
摘要

Selective reporting of results based on their statistical significance threatens the validity of meta-analytic findings. A variety of techniques for detecting selective reporting, publication bias, or small-study effects are available and are routinely used in research syntheses. Most such techniques are univariate, in that they assume that each study contributes a single, independent effect size estimate to the meta-analysis. In practice, however, studies often contribute multiple, statistically dependent effect size estimates, such as for multiple measures of a common outcome construct. Many methods are available for meta-analyzing dependent effect sizes, but methods for investigating selective reporting while also handling effect size dependencies require further investigation. Using Monte Carlo simulations, we evaluate three available univariate tests for small-study effects or selective reporting, including the trim and fill test, Egger's regression test, and a likelihood ratio test from a three-parameter selection model (3PSM), when dependence is ignored or handled using ad hoc techniques. We also examine two variants of Egger's regression test that incorporate robust variance estimation (RVE) or multilevel meta-analysis (MLMA) to handle dependence. Simulation results demonstrate that ignoring dependence inflates Type I error rates for all univariate tests. Variants of Egger's regression maintain Type I error rates when dependent effect sizes are sampled or handled using RVE or MLMA. The 3PSM likelihood ratio test does not fully control Type I error rates. With the exception of the 3PSM, all methods have limited power to detect selection bias except under strong selection for statistically significant effects. (PsycInfo Database Record (c) 2023 APA, all rights reserved).
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
HOU完成签到,获得积分10
刚刚
Seasun发布了新的文献求助10
刚刚
刚刚
mao完成签到 ,获得积分10
刚刚
xixilulixiu完成签到 ,获得积分0
刚刚
1秒前
酷波er的应助被辣辣医生采纳,获得10
1秒前
1秒前
2秒前
西西公主完成签到,获得积分10
2秒前
gyq发布了新的文献求助10
2秒前
haining的应助被stc采纳,获得10
2秒前
Momo发布了新的文献求助10
2秒前
TinkerBell发布了新的文献求助10
3秒前
草莓苹果发布了新的文献求助10
3秒前
周小鱼发布了新的文献求助10
3秒前
3秒前
3秒前
3秒前
小茉莉发布了新的文献求助10
3秒前
香蕉觅云的应助被amour采纳,获得10
3秒前
sunny的应助被ST采纳,获得10
3秒前
诚心的以寒完成签到,获得积分10
3秒前
3秒前
4秒前
zhutu完成签到,获得积分10
4秒前
彭于晏的应助被cz采纳,获得30
4秒前
OK发布了新的文献求助10
5秒前
我是老大的应助被aotuxiaodi采纳,获得10
5秒前
科研通AI6.2的应助被健忘身影采纳,获得10
5秒前
陆小果完成签到,获得积分10
5秒前
酷波er的应助被可爱觅松采纳,获得10
5秒前
热情的如雪完成签到 ,获得积分10
5秒前
yhy发布了新的文献求助10
6秒前
cwy完成签到,获得积分20
6秒前
6秒前
6秒前
6秒前
7秒前
秋风的应助被代渺采纳,获得10
7秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1500
John McDowells Bildungstheorie 800
Analyses de reconnaissances de dettes passées devant les échevins d'Ypres (1249-1291) 600
Handbook of Pharmaceutical Excipients. 9th ed 400
Synthesis, Application and Future Perspectives of Smart Nano-materials - Part 1 400
Breaking the World 300
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8155737
求助须知:如何正确求助?哪些是违规求助? 9552018
关于积分的说明 21707687
捐赠科研通 7744923
什么是DOI,文献DOI怎么找? 3426177
关于科研通互助平台的介绍 2551229
邀请新用户注册赠送积分活动 2469949