科研費の採択率は研究力を表しているのか?数字だけでは見えない評価の落とし穴

統計・データ分析

統計学と研究評価の視点から考える科研費採択率の読み方

「科研費に採択された。」

研究者にとって、これほど嬉しい知らせはありません。科研費(科学研究費助成事業)は、日本を代表する競争的研究費であり、多くの研究者にとって研究を継続・発展させるための重要な基盤となっています。そのため、科研費への採択は、研究者個人の実績としてだけでなく、大学や研究機関の研究力を示す指標としても広く利用されています。

大学の自己点検・評価書や中期計画、各種ランキングにおいても、「科研費採択率」はしばしば重要なKPI(重要業績評価指標)の一つとして扱われています。また、大学間の比較や学内の部局評価においても、「採択率が高い大学は研究力が高い」「採択率が低い大学は研究力に課題がある」といった議論が行われることも少なくありません。

しかし、本当に科研費の採択率だけで研究力を評価できるのでしょうか。

統計学や研究評価の観点から見ると、この問いに対する答えは決して単純ではありません。採択率は確かに重要な指標ですが、その数字だけで研究力を判断することには大きな限界があります。

採択率とは何を表している指標なのか

科研費の採択率は、一般的に「採択件数÷申請件数」で算出されます。

例えば100件申請し、そのうち30件が採択された場合、採択率は30%になります。計算方法は非常に単純であり、大学間比較もしやすいことから、多くの場面で研究力を示す代表的な指標として利用されています。

しかし、統計指標は「計算しやすいこと」と「解釈しやすいこと」が必ずしも一致するわけではありません。

▼科研費採択率に関する記事はこちら

あなたの採択率、本当にその数字で合っていますか?
単純な採択率では見えてこない研究者の現在地前回の記事では、「科研費の結果を一度だけで判断するのではなく、長期的な確率で考えてみよう」という視点を紹介しました。その中で、「自分の採択率を知ることが出発点になる」とお話ししました。では、その採択…

採択率という一つの数字の背後には、研究者の能力だけでは説明できない多くの要因が含まれています。そのため、この数値を適切に解釈するためには、「採択率とは何を測っている指標なのか」を理解する必要があります。

採択率は、研究者個人や大学の研究活動を一定程度反映する指標ではありますが、それ自体が研究力そのものを直接測定しているわけではありません。

採択率は研究者の実力だけで決まるものではない

科研費の審査では、研究課題の独創性や学術的意義、研究方法の妥当性、研究計画の実現可能性などが総合的に評価されます。そのため、優れた研究計画が採択されやすいことは間違いありません。

しかし、採択率はそれだけで決まるものではありません。

応募する研究種目や審査区分によって採択率は異なりますし、その年度の応募件数や予算規模、競争倍率によっても結果は変化します。同じ研究計画であっても、応募年度や審査区分が異なれば採否が変わる可能性は十分にあります。

さらに、研究者自身のキャリアステージも影響します。若手研究者を対象とした種目と大型種目では競争環境が異なり、採択率の単純比較は適切ではありません。

つまり、採択率には研究者の能力だけでなく、制度設計や申請環境といった外部要因も同時に反映されているのです。

「100%」と「70%」では、どちらが優秀なのか

統計学では、サンプルサイズが小さいほど偶然の影響を受けやすいことがよく知られています。

例えば、ある研究者が1回申請して1回採択された場合、その採択率は100%になります。一方で、別の研究者が10回申請し、そのうち7回採択された場合、採択率は70%です。

数字だけを見れば100%の方が優れているようにも見えます。しかし、統計学的に考えれば、そのような結論を導くことはできません。

試行回数が1回しかない場合、その結果には偶然が大きく影響します。一方、10回という試行を重ねた結果として70%を維持している研究者は、より安定した採択実績を持っていると考えることもできます。

これは科研費に限らず、多くの統計指標に共通する問題です。割合という数字は分かりやすい反面、その背後にあるサンプル数を無視すると、実態とは異なる印象を与えることがあります。

実際、統計学ではこのような問題を補正するためにベイズ推定や経験ベイズ法などの手法が用いられます。サンプル数が少ない場合には全体平均へ推定値を近づけることで、偶然による過大評価や過小評価を抑える考え方です。

科研費採択率についても、申請件数が極端に少ない研究者や部局を評価する際には、このような統計的視点を取り入れることが望ましいでしょう。

大学の採択率にも「申請戦略」が反映される

大学単位で公表される採択率についても、同様の注意が必要です。

例えば、大型研究種目への挑戦を積極的に推進する大学と、比較的採択率の高い研究種目を中心に申請する大学では、採択率だけを比較して研究力を論じることはできません。

さらに近年では、多くの大学で科研費申請率そのものを高める取組が進められています。いわゆる「全教員申請」や「申請義務化」といった方針を採用する大学では、申請件数は大きく増加しますが、その結果として採択率が低下することも十分考えられます。

逆に、採択が期待できる課題だけを厳選して申請すれば、採択率は高くなります。

つまり、採択率は研究力だけではなく、大学がどのような申請戦略を採用しているかという組織的な意思決定にも左右される指標なのです。

そのため、大学間比較を行う際には、採択率だけではなく、申請率や申請件数、研究種目の構成なども併せて確認することが重要になります。

採択率だけを目標にすると何が起こるのか

科研費制度の本来の目的は、採択率を高めることではありません。

優れた研究を支援し、新たな学術的知見を創出することにあります。

もし採択率だけを成果指標として強く意識するようになれば、研究者や大学は「採択されやすい研究」を優先するようになる可能性があります。

例えば、挑戦的な研究テーマよりも、過去の研究成果を発展させる安全性の高いテーマを選択したり、審査上有利と考えられる研究計画を優先したりする行動が生じるかもしれません。

研究評価の分野では、このような現象はGoodhart’s Law(グッドハートの法則)として知られています。これは「指標が目標になると、その指標は本来の機能を失う」という考え方です。

▼Goodhartの法則に関する記事はこちら

論文数をKPIにすると何が起こるのか?Goodhartの法則から考える研究評価
Goodhartの法則とは「指標が目標になると、その指標は良い指標ではなくなる」という考え方です。論文数や被引用数、科研費などの研究評価指標を例に、KPIの正しい活用方法やDORA宣言、Leiden Manifestoとの関係を分かりやすく解説します。

採択率は研究活動を評価するための指標であり、それ自体が研究活動の目的になってしまえば、本来期待される研究の多様性や挑戦性が失われる可能性があります。

採択率は重要である。しかし、それだけでは不十分である

ここまで採択率の限界について述べてきましたが、それは採択率に意味がないということではありません。

むしろ、採択率は大学の研究活動や申請支援体制を把握する上で極めて重要な指標です。

問題は、その一つの数字だけで研究力を判断してしまうことにあります。

研究力をより適切に評価するためには、採択率だけではなく、採択件数、申請件数、継続課題数、若手研究者の採択状況、研究成果としての論文や被引用数、国際共同研究、社会実装など、多面的な指標を組み合わせて評価することが求められます。

近年では、文部科学省やNISTEPにおいても、研究力を単一指標ではなく複数のアウトプットやアウトカムを統合して評価する考え方が採られています。

科研費採択率も、そのような研究評価体系を構成する重要な要素の一つとして位置付けることが適切でしょう。

数字は結論ではなく、新たな問いを生み出すためにある

科研費の採択率は、研究力を考える上で非常に有用な指標です。しかし、それは研究力そのものではありません。

採択率が高い大学があれば、「なぜ高いのか」という問いが生まれます。申請支援が充実しているのか、研究環境が整っているのか、それとも申請戦略によるものなのか。その背景を分析して初めて、数字は意味を持ちます。

一方で、採択率が低い大学を見ても、「研究力が低い」と直ちに結論付けることはできません。申請率の向上を重視した結果かもしれませんし、大型種目への積極的な挑戦が影響している可能性もあります。

研究評価において重要なのは、数字を評価のゴールとすることではなく、数字を起点として研究活動の実態を理解することです。

科研費採択率は、そのための優れた出発点ではあります。しかし、本当の研究力を理解するためには、その数字がどのような背景から生まれたのかを読み解く姿勢が不可欠です。

数字は答えではありません。

数字は、新たな問いを生み出し、研究活動をより深く理解するための入り口なのです。

コメント