「この結果はどこまで当てはまる？」研究の限界と適用範囲を伝える書き方

研究報告書の最後に、「本研究にはいくつかの限界がある。サンプル数が少なく、一般化には注意が必要である。今後さらなる研究が求められる」と書く。よく見かける文章ですが、読者が知りたいことにはほとんど答えていません。どの結果が不確かなのか、誰に当てはめにくいのか、どの条件なら使えそうなのかが分からないからです。

先に結論を言うと、研究の限界は弱点を並べる謝罪欄ではありません。「この研究で確かめた範囲」と「まだ確かめていない範囲」を分け、対象、環境、介入・測定、時期の違いが結果にどう関わりうるかを示す欄です。限界ごとに、起こりうる影響、その方向や大きさ、なお言えることまで書けば、読者は知見を使える範囲を判断できます。

この記事では、観察研究の報告指針STROBE、無作為化試験のCONSORT 2025、系統的レビューのPRISMA 2020、医学雑誌編集者国際委員会（ICMJE）などの指針を手がかりに、限界と適用範囲を自然な日本語で伝える方法を考えます。

「限界があります」だけでは、判断材料にならない

限界の役割は、研究の価値を下げることではありません。結果をどのように解釈し、どこまで使えるかを調整することです。ICMJEは、考察で研究の限界を示し、将来の研究や実務・政策への意味を検討するよう勧めています。同時に、データで十分に支えられていない断定を避けることも求めています。

観察研究の報告指針STROBEは、さらに具体的です。偏りや不精確さの原因を挙げるだけでなく、可能なら、その影響が結果を大きく見せるのか小さく見せるのか、どの程度ありそうかを論じます。そして、目的、限界、分析の多さ、他の研究を踏まえて慎重に解釈し、結果を他の対象や条件へ当てはめられるかを検討します。

たとえば「自己申告なので限界がある」だけでは不十分です。社会的に望ましい回答を選びやすい質問なら、望ましい行動の割合を実際より高く見積もった可能性があります。匿名回答にした、別の指標でも傾向が似ていた、といった情報があれば、影響の程度を判断する手がかりになります。

すべての限界について正確な方向や大きさを計算できるわけではありません。その場合は、「影響の方向は判断できない」と明記します。分からないことを空欄にするより、どこまで分からないかを示す方が、読者は過大評価も過小評価も避けられます。

研究の正しさと、適用できる範囲は別の問い

研究の限界を考えるときは、二つの問いを分けます。一つは、その研究の中で結論がどれだけ信頼できるかです。対象者の選び方、欠測、測定誤差、交絡、分析方法などが関わります。もう一つは、その結果を別の人、場所、方法、時期へ当てはめられるかです。こちらは外的妥当性、一般化可能性、適用可能性などと呼ばれます。

内部で結論が歪んでいれば、広い範囲へ当てはめる前提が弱くなります。一方、丁寧に行われた研究でも、すべての人と場面に自動的に当てはまるわけではありません。大学生を対象に、静かな実験室で、短時間だけ行った課題の結果は、働く人が職場で半年間続ける状況と条件が違います。

Cochrane Handbookは、研究結果を適用するとき、研究が扱った集団、介入、比較対象、結果が、使いたい問いとどの程度一致するかを検討します。対象者が完全に同じになることはありません。違いが小さいのか、結果を変えそうなほど大きいのかを判断する必要があります。また、複雑な取り組みは、担当者の経験、組織の資源、制度、文化によって働き方が変わる可能性があります。

つまり、適用範囲は「この研究は一般化できる／できない」という二択ではありません。「誰が、どの状況で、何の判断に使うか」との関係で決まります。対象者の年齢が違っても結果に影響しにくい研究もあれば、実施者の技能が少し違うだけで効果が変わる取り組みもあります。

誰に・どこで・何を・いつ確かめたか

適用範囲を説明するときは、少なくとも次の四つを確認します。これは新しい名前を付けた型ではなく、研究条件を読み手とそろえるための実務上の確認項目です。

• 誰に：年齢、職業、健康状態、文化、募集経路、参加条件は何か
• どこで：国、地域、組織、制度、設備、対面・オンラインなど、どの環境か
• 何を：どの介入、比較、刺激、質問、測定方法、結果指標を使ったか
• いつ：調査時期、追跡期間、社会状況、技術や制度の時点はいつか

STROBEの解説は、外的妥当性を特定の条件との関係で考える必要があると説明しています。年齢や性別、民族、病気の重さが異なる人に当てはまるか、曝露や結果の定義は別の場面でも同じ意味か、何年も前のデータが現在にも当てはまるか、といった問いです。その判断には、研究場所、参加条件、測定、募集・追跡時期を十分に報告することが欠かせません。

2023年のDelphi研究では、国や専門分野の異なる84人が、無作為化試験の外的妥当性の定義と評価基準を検討しました。合意された定義は、集団、環境、介入、結果などが異なる状況へ一般化するための妥当な根拠を、試験結果がどの程度与えるかというものです。ただし、著者らは、合意した14項目を実際の評価道具として使うには、試行と検証が必要だとしています。外的妥当性を一つの点数で機械的に決められる段階ではありません。

標本の狭さは、説明せずに広げたとき問題になる

Henrich、Heine、Norenzayanは、行動科学の多くが、西洋の、教育を受けた、工業化された、裕福で民主的な社会の参加者に偏っていると指摘しました。さまざまな心理現象を比較すると、こうした集団が人類全体の平均的な代表とは限らず、外れた反応を示す場合もあると論じています。

この指摘は、「西洋の大学生を対象にした研究は無価値だ」という意味ではありません。特定の集団で現象を精密に調べることには価値があります。問題は、その集団で得た結果を、説明なしに「人は」「誰でも」と広げることです。研究対象を正確に書き、どの特徴が結果を変えそうかを検討すれば、狭い標本でも知見の位置づけを明確にできます。

Simons、Shoda、Lindsayは、実証研究に「一般化の制約」を示す記述を加えることを提案しました。結果が、参加者、材料、課題、状況のどの特徴に依存すると予想するかを研究者が明示する考え方です。単に「他の集団では異なるかもしれない」と書くのではなく、何が変わると、どの結果が変わりそうかを述べます。

予想には根拠が必要です。事前の理論、過去研究、感度分析、下位集団の結果などを手がかりにします。根拠がなければ、「年齢による違いは検討していない」「別の文化圏で同じ結果になるかは分からない」と、未検証の範囲として残します。

「視覚化・構造化」で、限界を判断の地図にする

伸滋Designの伝わる設計マップにある「視覚化・構造化」は、複数の情報を関係が見える形に整理する型です。限界を書くときは、弱点を長い段落に詰め込まず、「研究で確かめた条件」「起こりうる影響」「言えること」「まだ言えないこと」を対応させます。

表にするなら、左から「項目」「この研究の条件」「違う条件で起こりうること」「結果への影響」「現在言える範囲」を並べます。たとえば対象者について、条件は「都市部の大学生120人」、違う条件は「就業者や高齢者」、影響は「時間制約や経験によって課題への反応が変わる可能性」、言える範囲は「同様の募集経路の若年成人で確認」と書けます。

重要なのは、限界と結論を離さないことです。限界欄で「一般化に注意」と書きながら、要約や見出しで「人は必ず」と断定すれば、読者には強い表現だけが残ります。一般向け要約の設計でも、対象、方法、主な結果、限界を短い要約の中で対応させる必要があります。

架空例で比べる、伝わりにくい限界と伝わる限界

以下は説明のための架空例であり、伸滋Designの実績や顧客事例ではありません。

ある研究で、都市部の大学生120人に、スマートフォンの通知を2時間切るよう依頼し、読解課題の得点を比べたとします。通知を切った群の平均得点は高かったものの、研究は大学の実験室で一度だけ行われ、参加者は自分がどの条件かを知っていました。

伝わりにくい書き方は、次のようなものです。

本研究はサンプル数が少なく、大学生のみを対象としたため一般化には限界がある。今後、より多様な対象で検討する必要がある。

何が言えるかも、結果がどちらへずれた可能性があるかも分かりません。そこで、条件と影響を対応させます。

本研究は都市部の大学生120人を対象に、実験室で2時間の読解課題を行った。したがって、同じ方法が就業者、高齢者、長期の学習や職場環境でも同じ効果を持つかは確かめていない。参加者は通知を切ったことを認識しており、集中できるという期待が自己評価や努力量を高めた可能性がある。この影響は、通知を切る効果を大きく見せる方向に働きうる。一方、客観的な読解得点でも群間差が見られたため、自己評価だけで生じた差とは言えない。現時点で言えるのは、同様の若年成人が短時間の読解課題を行う条件で、通知を切ることと得点の改善が関連した、という範囲である。

この書き方なら、読者は結果を否定せずに、使える場面と未検証の場面を区別できます。なお、無作為に割り付けたか、得点差の推定幅はどれくらいかによって、因果的な表現の強さは変わります。「有意差が出た／出なかった」だけで判断しない方法は、有意差が出なかった結果の伝え方でも解説しています。

研究の種類によって、限界の書き方は変わる

限界欄に万能の定型文はありません。CONSORT 2025は、無作為化試験の限界に一般化可能性も含めて論じるよう整理しました。参加者だけでなく、実施施設、介入を行った人、実際に提供された内容、追跡期間などが適用範囲に関わります。

PRISMA 2020は、系統的レビューについて、含まれた証拠そのものの限界と、レビューの進め方の限界を分けます。前者には研究の偏り、不精確さ、結果のばらつきなどがあり、後者には検索範囲、選定、データ抽出、分析上の判断などがあります。レビューに含まれた研究が弱いことと、レビューの手続きに問題があることを混ぜない設計です。

APAのJournal Article Reporting Standardsは、量的研究、質的研究、混合研究それぞれについて、何を報告するかを案内しています。質的研究では、統計的な代表性と同じ考え方だけで評価せず、研究の文脈、参加者、研究者の立場、解釈の過程を示すことが重要です。自分の研究デザインに合う報告指針を選び、限界の観点を確認してください。

限界を書く手順

1．結論ごとに、必要な条件を確認する

論文全体に一つの限界を付けるのではなく、主要な結論ごとに、どのデータと方法が支えているかを確認します。参加者が途中で減っている場合は、参加者フロー図と照合し、誰のデータが結論に含まれているかを確かめます。

2．限界が生む影響を具体化する

「小規模」「単一施設」「自己申告」「短期間」といったラベルだけで止めません。推定が不安定になる、特定の人が含まれにくい、望ましい回答が増える、一時的な変化しか分からない、というように、結論への影響へつなげます。

3．方向と大きさを検討する

結果を大きく見せるのか、小さく見せるのか、方向が分からないのかを書きます。感度分析、別の測定、欠測者の特徴、信頼区間、過去研究との比較が判断材料になります。数値化できない場合も、影響が小さいと考える理由、重大になりうる条件を説明できます。

4．なお言えることを残す

限界を書いた後で、研究から何も分からないように終えないことが大切です。確認できた対象、環境、方法、時期の範囲で、どの結論が支えられるかを言い直します。限定された結論は、弱い結論ではなく、根拠と範囲が一致した結論です。

5．要約・見出し・図表もそろえる

本文だけ慎重にしても、タイトル、要約、図の見出し、広報文が断定的なら、限界は読まれません。主要な制約が結論の意味を変える場合は、読者が最初に目にする場所にも反映します。公開後に解釈が変わる修正をした場合は、訂正・更新履歴の設計も必要です。

限界の説明にも限界がある

第一に、著者が予想した適用範囲は、実際に別の条件で確かめた結果ではありません。「他の地域でも同じはず」「高齢者では弱まるだろう」と書いても、それは仮説です。一般化可能性は、異なる対象や環境での追試、外部データでの検証、複数研究の統合によって確かめます。

第二に、違いがあるだけで結果が変わるとは限りません。年齢、文化、制度が異なっても、研究で扱う仕組みに関係しなければ影響は小さいかもしれません。差を列挙するだけでなく、なぜ結果を変えそうなのかを説明します。

第三に、過度に慎重な文章も判断を妨げます。「何も一般化できない」「すべて今後の研究が必要」と書けば、現在の証拠を使える場面まで見えなくなります。Cochrane Handbookが示すように、広げすぎることと、保守的になりすぎることの間で、根拠の一致度を判断します。

第四に、報告指針は研究の質を自動的に保証しません。CONSORTも、チェックリストは普遍的に正しい方法を指定する品質点数ではなく、設計・実施・分析を読者が評価できるようにする報告の指針だと説明しています。項目を埋めることより、読者が判断できる情報を示すことが目的です。

公開前チェックリスト

• 限界を「一般化に注意」の一文で終えていないか
• 主要な結論ごとに、支える対象・環境・測定・時期を確認したか
• 偏りや不精確さが、どの結果に影響するかを書いたか
• 影響の方向と大きさを、分かる範囲で示したか
• 方向が分からない場合、そのことを明記したか
• 研究で確かめた範囲と、まだ確かめていない範囲を分けたか
• 対象者の年齢、職業、文化、募集経路などを十分に説明したか
• 組織、制度、実施者、設備など環境の違いを検討したか
• 介入、質問、刺激、測定方法が別の場面でも同じ意味を持つか考えたか
• 調査時期と追跡期間が、現在の判断に合うか確認したか
• 限界を書いた後に、なお言える結論を残したか
• タイトル、要約、図表、広報文の表現も、適用範囲と一致しているか
• 研究デザインに合う報告指針を確認したか

まとめ：限界は、知見を正しく使うための境界線

研究の限界は、研究を弱く見せるための告白ではありません。結果がどの条件で確かめられ、どこから先はまだ分からないかを伝える境界線です。対象、環境、介入・測定、時期を整理し、限界が結論へ与える影響、その方向や大きさ、なお言えることを対応させます。

「この研究は一般化できるか」とだけ問うのではなく、「誰が、どの場所で、何の判断に使うのか」と問い直してください。読者は、断定の強さではなく、条件と根拠の一致によって、知見を使える範囲を判断できます。

論文、研究報告書、研究紹介ページで、限界をどこまで書けばよいか、慎重に書くほど研究の価値が伝わらなくなると悩む場合は、伸滋Designのお問い合わせフォームからご相談ください。研究の価値を保ちながら、言えることとまだ言えないことが一読で分かる情報構造を一緒に整えます。

参考文献

1. International Committee of Medical Journal Editors. Preparing a Manuscript for Submission to a Medical Journal.
2. STROBE Initiative. STROBE checklist for cohort, case-control, and cross-sectional studies.
3. Hopewell S, Chan AW, Collins GS, et al. CONSORT 2025 explanation and elaboration: updated guideline for reporting randomised trials. BMJ. 2025;388:e081124.
4. Page MJ, McKenzie JE, Bossuyt PM, et al. PRISMA 2020 expanded checklist.
5. Schünemann HJ, Vist GE, Higgins JPT, et al. Chapter 15: Interpreting results and drawing conclusions. Cochrane Handbook for Systematic Reviews of Interventions.
6. Simons DJ, Shoda Y, Lindsay DS. Constraints on Generality (COG): A Proposed Addition to All Empirical Papers. Perspectives on Psychological Science. 2017;12(6):1123–1128.
7. Henrich J, Heine SJ, Norenzayan A. The weirdest people in the world? Behavioral and Brain Sciences. 2010;33(2–3):61–83.
8. Munthe-Kaas H, et al. Consensus on the definition and assessment of external validity of randomized controlled trials: A Delphi study. Research Synthesis Methods. 2024.
9. American Psychological Association. APA Style Journal Article Reporting Standards.