メタアナリシスとは？

メタアナリシスは、同じ問いを扱う多くの研究の結果を集めて一つの数字にまとめる方法だ。個々の研究は運だけで真実から大きく外れることがあるので、十本まとめたほうが一番声の大きい一本よりずっと多くを語る。研究でこう示されたと見出しが言うとき、その主張が取りうる最も強い形はたいていこれになる。

十本の試験が同じ薬を調べ、四本が効くと出し、三本が何も出さず、三本が曖昧で、どの立場の人にも振りかざせる研究がそろってしまった。票を数えるのは魅力的で間違ったやり方で、四十人の試験が四千人の試験を上回れてしまうからだ。メタアナリシスは代わりにそれらを溶かし合わせ、精度に応じて重みを付けるので、大きく丁寧な試験ほど最終的な答えを強く引っぱる。得られるのは解像度で、一本では確かめられないほど小さな効果も、何千人分を集めれば見えるようになる。限界のほうも本物だ。違うものを測った研究を混ぜれば、答えは何についてのものでもなくなり、研究者はこれをリンゴとミカンを混ぜると呼ぶ。さらに悪いことに、雑誌は派手な結果を好むので何も出なかった試験は 公表されないことが多く、見えている証拠が成功のほうへ傾き、これには出版バイアスという名前がある。良いメタアナリシスは何を入れるかを始める前に宣言し、欠けている研究が結論をひっくり返しうるかまで検証する。

隣人の一人が新しいパン屋を絶品だと言い、別の一人は期待外れだと言うが、一度の来店ではその日の午後に厨房がやったことしか捉えられない以上、どちらも何も決着させない。四十件のレビューを読めば型が浮かび上がり、丁寧な常連を一行の悪態より重く見ればなおさらだ。それが全部で、大きな意見ではなく、弱い信号を重ねて下にある形を否定できなくすることに尽きる。落とし穴はネット通販でおなじみで、最悪のレビューを黙って埋めるパン屋は、あなたに都合のよい作り話を平均させることになる。