« 見出しに見る勘違い(その936) | トップページ | お八つ,秋なので。 »

2023年10月17日 (火)

世界の大学ランキング 2024(その2)

毎年 世界の大学ランキングを発表する機関(組織)はいくつかありますが,ここでは 英国の雑誌による ‘Times Higher EducationTHE’ がSeptember 20, 2023 に発表した “World University Rankings 2024” を紹介します。
これは (その2)で 評価手法と 日本の大学のランキングを示します。

下記,拙訳・転載します。
********************
World University Rankings 2024: methodology
評価手法

20回 世界大学ランキングの手法は,世界中の多様な研究集中型大学の成果を反映するために大幅に更新された。

Times Higher EducationTHE世界大学ランキング(World University Rankings)は,教育,研究,知識伝達(knowledge transfer) そして 国際的視野(international outlook)といった中核的使命のすべてにわたって研究集約型大学(research-intensive universities)を評価する唯一の世界的な成績である。

20回世界大学ランキングの今年の手法(methodology)は大幅に更新され,現在および将来にわたって世界中の多様な研究集中型大学の成果を反映し続けるようになった。

最も包括的でバランスのとれた比較を提供するために,学生,学者,大学リーダー,業界,政府から信頼されている,慎重に調整されたパフォーマンス指標を 13個から 18個に移行した。 指標の 1つ 「留学(study abroad)」は現在重みがゼロだが,将来的にはカウントされる予定である (以下を参照)

パフォーマンス指標は依然として 5つの領域にグループ化されているが,これらの名前は微調整されている(tweaked):教育(学習環境);研究環境(量,収入,評判);研究の質(引用の影響力,研究の強み,研究の卓越性,研究の影響力);国際的な展望(スタッフ,学生,研究);そして産業(収入と特許)。

001_20231010174501

Teaching (the learning environment)(教育(学習環境)): 29.5%

Teaching reputation(教育の評判): 15%
Staff-to-student ratio(教職員の学生との比率: 4.5%
Doctorate-to-bachelor’s ratio(博士の学士との比率)2%
Doctorates-awarded-to-academic-staff ratio(学術職員に対する博士号取得者比率):5.5%
Institutional income(機関収入): 2.5%

このカテゴリーの基礎となる(underpins)最新の学術評判調査(Academic Reputation Survey:毎年実施,今年はTHEが実施)は,202210月から20231月の間に実施された。我々は,分野(disciplines)や国を超えて回答がバランスよく分散されるように調査を実施した。専門分野または国が過大 あるいは 過小評価されている場合,THE のデータ・チームは,学者の世界的な分布を完全に反映するように回答に重み付けを行った。
2023年のデータは 2022年の調査結果と組み合わされ,166ヶ国の大学に 50 万以上の投票が与えられた。引用された 68,000人以上の学者からの投票である。

教育機関が次世代の学者の育成(nurturing)にどれほど熱心に取り組んでいるかを示すだけでなく,大学院研究生の割合が高いことは,卒業生にとって魅力的であり,卒業生の能力開発に効果的な最高レベルの教育を提供していることを示唆している。この指標は,博士号の授与量が分野によって異なることを反映して,大学独自の科目構成を考慮して正規化されている。

教育機関の収入は,学術スタッフの数に応じて調整され,購買力平価 (PPPpurchasing-power parity) で正規化される。これは教育機関の一般的なステータスを示し,学生とスタッフが利用できるインフラストラクチャと施設について広範な意味を与える。

Research environment(研究環境): 29%

Research reputation(研究の評判): 18%
Research income(研究収入): 5.5%
Research(研究生産性): 5.5%

このカテゴリの最も顕著な指標は,年次学術評判調査 (annual Academic Reputation Survey) への回答に基づいて,同業者間での研究の優秀さに関する大学の評判を調べる。

研究収入は学術スタッフの数に応じて増減され(scaled),購買力平価(PPP)で調整される。これは国の政策や経済状況に影響される可能性があるため,物議を醸す指標である。                
しかし,収入は世界クラスの研究の発展にとって極めて重要であり(crucial),収入の多くは競争の対象となり,査読(peer review)によって判断されるため,専門家らはそれが有効な尺度であると示唆した。
この指標は,各大学の個別の科目プロファイルを考慮して完全に正規化されており,科学科目の研究助成金(research grants)が最高品質の社会科学,芸術,人文科学の研究に与えられる助成金よりも高額であることが多いという事実を反映している。

生産性を測定するために,‘Elsevier’s Scopus’ データベースによってインデックス付けされた学術雑誌に掲載された論文の数を学者ごとにカウントし,機関の規模に合わせて増減し(scaled),主題ごとに正規化する。これは,質の高い査読誌(peer-reviewed journals)に論文を掲載する大学の能力を示している。
2018年のランキングから,大学が職員不在を宣言している科目で発表された論文に単位を与える方法を考案した。

Research quality(研究の質): 30%

Citation impact(引用の反響): 15%
Research strength(研究力): 5%
Research excellence(研究の優秀性): 5%
Research influence(研究の影響力): 5%

我々の研究の質の柱(research quality pillar)は,新しい知識やアイデアを広める大学の役割に焦点を当てている。

我々は,大学の出版物が世界中の学者によって引用される平均回数を把握することにより,引用の影響を調査する。
今年,書誌データのサプライヤーであるエルゼビア(Elsevier)は,5 年間に発行された 1,650 万件の雑誌記事,論文レビュー,会議議事録,書籍および書籍の章に対する 1 3,400 万件以上の引用を調査した。データには,エルゼビアの Scopus データベースによって索引付けされた 27,950 を超えるアクティブな査読済みジャーナルと、2018 年から 2022 年までのすべての索引付けされた出版物が含まれる。

引用は,各大学が人類の知識の総体にどれだけ貢献しているかを示すのに役立つ:引用は,どの大学の研究が傑出しており(stood out),他の学者によって取り上げられ,その上に構築されているか,そして最も重要なことに,世界の学術界で分野に関係なく共有され,我々の理解の境界を広げているかを示す。データは,異なる主題分野間の引用量の変動を反映するために正規化されている。
これは,伝統的に被引用数が多い主題において高レベルの研究活動を行っている機関が不当に有利になることがないことを意味する。
引用スコアの国毎調整済みの生の測定値と国毎調整されていない生の測定値の等しい測定値をブレンドした。

2023年には,3つの新しい研究品質基準が追加された。

研究の強さ(research strength)は,フィールド加重引用(field-weighted citation)の影響の 75パーセンタイルを計算する。これは,典型的な研究がどの程度強力であるかを示す非常に堅牢な(robust)ガイドである。
研究の卓越性は,世界中の分野加重引用影響度で上位 10% に入る研究出版物の数を調べる。これは,機関における世界をリードする研究の量の目安となる。年,主題,スタッフ数で正規化されている。

研究の影響力は,研究が世界で最も影響力のある研究によっていつ評価されるかを理解するのに役立つ- つまり,卓越性をより広範に見ることができる。この指標の背後にある考え方は,引用の価値は同じではないということ:「重要な」論文からの引用は,「重要でない」論文からの引用よりも意味がある(significant)。

我々は反復手法を使用して,引用数を数えるだけでなく,引用論文の重要性も考慮して論文の重要性を測定する。分野によって引用パターンも異なるため,研究の主題についても考慮する。

International outlook(国際的展望): 7.5%

Proportion of international students(留学生比率): 2.5%
Proportion of international staff(外国人スタッフ率): 2.5%
International collaboration(国際連携): 2.5%

地球上から学部生,大学院生,教員を惹きつける大学の能力が,世界舞台での成功の鍵となる。
3番目の国際指標では,大学の関連出版物全体のうち,少なくとも 1人の国際的な共著者がいて,より多くの書籍に報いる割合を計算する。この指標は大学の科目構成を考慮して正規化されており,「研究の質(Research quality)」カテゴリと同じ 5年間の枠を使用する。

我々の国際的な指標では,大国は小国に比べて不利な立場にある。それは,小国の職員や学生が海外で働いたり留学したりすることが「容易」であるという点である。これにより,2023年に 3つの指標に対する正規化アプローチが変更され,今後はこれらの指標を評価する際に国の人口が考慮されるようになる。

国内学生への国際的な学習機会の提供を評価する留学指標は,国際展望の柱(the International Outlook pillar)を補完するものだが,現在は 0% の比重である。ゼロ・ウェイトは,新型コロナウイルス感染症による海外旅行への影響を考慮した一時的な規定である。

Industry(産業): 4%

Industry income(産業収入): 2%
Patents(特許): 2%

イノベーション,発明,コンサルティングを通じて産業界を支援する大学の能力は,現代のグローバル・アカデミーの中核的な使命となっている。産業界の収入指標は,教育機関が産業界からどれだけの研究収入を得ているか(PPP調整後)を,雇用している学術スタッフの数と比較して見ることで,そのような知識移転活動を把握しようとする。
この指標は,企業が研究に対してどの程度の資金を支払う意思があるか,また商業市場で資金を集める大学の能力を示唆しており,組織の質を示す有用な指標となる。
しかし,大学が技術移転を通じて国家経済をどの程度支援しているかは,もっと評価されるべき分野である。

2023年に導入された特許指標は,大学が実施した研究を引用するあらゆる情報源からの特許の数として定義される。
データはエルゼビア(Elsevier)によって提供され,2018年から 2022年の間に公開された特許に関連している (これらの日付の間に公開された研究ではない)。特許は,世界知的所有権機関(the World Intellectual Property Organisation),欧州特許庁,米国,英国,日本の特許庁から提供されている。
この措置は,特許の少ない分野で研究を行っている大学に不利益を与えることを避けるために主題に重点を置いており,機関の規模に合わせて調整されている。

Exclusions
除外

学部生を教えていない大学,または2018年から2022年の間に関連出版物の研究成果が1,000件未満(年間最低150件)の大学は,世界大学ランキングから除外される可能性がある。
研究成果の 80%以上が 11の主題分野のいずれかに独占的に属している大学も除外される可能性がある。

「レポーター」ステータスを持つとしてリストされている表の下位の大学は,データを提供したが,ランクを受け取るための資格基準を満たしていなかった。

Data collection
データ集積

教育機関は,ランキングで使用するための機関データを提供し,承認する。
まれに,被験者レベルの特定のデータ・ポイントが提供されない場合,全体のデータ・ポイントと利用可能な被験者レベルのデータ・ポイントから計算された推定値が使用される。データ・ポイントが欠落しているために評価点(metric score)を計算できない場合は,控えめな推定値を使用して代入される。こうすることで,機関が見落としたり提供しなかったデータに対して「ゼロ」値を課すなどの厳しいペナルティを課すことは避けられるが,データを差し控えたことで機関に報酬を与えることはない。

Getting to the final result
最終結果に至る

一連の特定のデータ・ポイントから指標,そして最終的に機関の合計スコアに移行するには,根本的に異なるデータを表す値を一致させる必要がある。これを行うために,各指標に対して標準化アプローチを使用し,上で詳述した割合で指標を組み合わせる。我々が使用する標準化アプローチは,特定の指標内のデータの分布に基づいており,累積確率関数(cumulative probability function)を計算し,特定の機関の指標がその関数内のどこに位置するかを評価する。

ほとんどの指標では,Z-スコアリングのバージョンを使用して累積確率関数を計算する。教育の評判,研究の評判,研究の卓越性,研究の影響力,および特許に関する指標におけるデータの分布には,指数関数的な要素を使用する必要がある。
(転載了)
**********************
かなり難解な評価手法です。
下に 日本の大学のランキングの上位 50大学を示します。

Japan-rank-a

| |

« 見出しに見る勘違い(その936) | トップページ | お八つ,秋なので。 »

ニュース」カテゴリの記事

コメント

コメントを書く



(ウェブ上には掲載しません)


コメントは記事投稿者が公開するまで表示されません。



« 見出しに見る勘違い(その936) | トップページ | お八つ,秋なので。 »