アーカイブ / LLM
共著者の多いAI論文をどう数えるか:引用を研究チームの規模別に集計するSBCI
Scale-Balanced Citation Index(SBCI)
概要
- SBCIは論文別の引用数を著者数に応じて調整し、大規模・小規模論文の寄与を別々に集計して統合する。
- 著者らは博士課程学生1000人の合成データを設計したが、確認できた本文の範囲に比較結果の数値はない。
- 実務で使う前に、著者数が区分の境界をまたぐ際の得点の性質と、実データでの順位の安定性を確かめる必要がある。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Scale-Balanced Citation Index(SBCI)の仕組み
- 01論文の引用数と著者数
- 02論文別の引用を調整
- 03規模別に合計
- 04重み付き得点
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
SBCIは、共著者が数百人から千人を超える基盤モデル論文が、研究者個人の引用指標に与える影響を扱う。著者らが挙げるGemini論文には1361人の著者がおり、引用数と著者名だけでは各人の仕事を区別しにくい。
総引用数やh指数は採用や研究費の判断材料にも使われる。大人数の論文に参加した人と少人数の論文を重ねた人の業績を、どのように数値で比較するかが研究の出発点である。
手法
SBCIは、研究者の各論文の引用数と全著者数を入力に取る。引用数を、著者数に応じて減らすための関数で割り、論文別の寄与を求める。次に著者数のしきい値で論文を二群に分け、それぞれの寄与を合計する。本文の実験設定では、26人以上を大規模群とする。
二群の合計には引用の集中を調整する関数を適用し、重みを付けて一つの得点を出す。例えば引用数が同じ5人著者の論文と30人著者の論文は、別の群に入り、著者数による調整も異なる。「重み」は二群を最終得点にどれだけ反映するかを決める値で、本文は設定候補を探索する手順を示す。
新規性
SBCIは、各論文の引用数を著者数に応じて調整し、著者数のしきい値で分けた二群の寄与を別々に合計する。二群に重みを付けて一つの得点にする点が、著者らの提案の中心である。
著者らは引用数の増加で得点が下がらないことなどを基本条件に挙げる。ただし、著者数がしきい値をまたぐ場合の得点の性質は、確認できた本文の範囲では証明だけで判断できない。
従来手法との違い
総引用数は各論文の引用数を足す。h指数は「少なくともh回引用された論文がh本ある」ときの最大のhで、いずれも論文ごとの著者数を直接は反映しない。既存の著者数調整法には、引用数を全著者数で等分してからh指数を求める方法もある。
SBCIは著者数による調整に加え、大規模論文と小規模論文の合計を分けて重み付けする。本文は指数関数で引用を減らす別のh指数も紹介するが、確認できた本文の範囲では、これらとの実測比較値や一貫した優劣は確認できない。
実験結果
著者らは2020~2024年に各自4~10本を発表する博士課程学生1000人の合成データを設計した。構成は小規模論文のみ800人、大小両方100人、大規模論文のみ100人と説明する。引用数には対数正規分布、著者数には小規模側と大規模側の混合分布を設定し、チーム規模や出版年でも引用数を調整する。
パラメータ選択では、候補者間の得点のばらつき、二群の寄与の均衡、引用数を少し変えた際の順位変動を基準に挙げる。著者らは識別性と頑健性の向上を主張するが、確認できた本文の範囲では結果表や達成値を確認できず、改善幅は記せない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:基盤モデル研究者の採用審査で、候補者ごとの論文一覧、各論文の同一取得日時点の引用数と全著者数を入力し、SBCIの得点と規模別の内訳を一覧にする。役割の確認には、論文の貢献記述と本人の業績説明も集める。
担当者は既存指標と順位が異なる候補者について、元の論文と役割記述を読む。SBCIの入力には個々の仕事内容が含まれないため、この使い方は確認対象を選ぶための仮説であり、採否の自動判断を意味しない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:対象者の論文一覧、全著者数、同一取得日時点の引用数を集め、著者名の取り違えと論文の重複を確認する。SBCIのしきい値、調整関数、重みを記録して計算し、総引用数、h指数、著者数で等分するh指数を比較対象にする。センサー情報は使わない。
論文の貢献記述と本人の業績説明を人手で読み、比較用の役割ラベルを作る。対象分野に合わせて設定を調整し、設定や引用数を少し変えた際の順位変動と、役割ラベルとの食い違いを測る。評価方法を固定したうえで、人が個別の業績を判断する。
限界と課題
著者らは、機械学習の博士課程学生について、チーム規模・引用数・出版年を合わせて捉えた公開データがないため、合成データを作ったと説明する。また本文では、大規模論文のみの群を説明する箇所で、著者数を大規模側の分布から引くという記述と混合確率の指定が食い違う。
編集上の検証事項は、著者数がしきい値をまたいで群が変わる際にも得点が増えないか、引用の取得日や著者名の照合で順位が変わるか、同じ論文内で異なる役割をどう扱うかである。合成データ上の主張を実際の審査に移せるかも未確認である。
出典
元のタイトル・要旨を確認する(英語)
When a Paper Has 1000 Authors: Rethinking Citation Metrics in the Era of LLMs
Author-level citation metrics provide a practical, interpretable, and scalable signal of scholarly influence in a complex research ecosystem. It has been widely used as a proxy in hiring decisions. However, the past five years have seen the rapid emergence of large-scale publications in the field of large language models and foundation models, with papers featuring hundreds to thousands of co-authors and receiving tens of thousands of citations within months. For example, Gemini has 1361 authors and has been cited around 4600 times in 19 months. In such cases, traditional metrics, such as total citation count and the $h$-index, fail to meaningfully distinguish individual contributions. Therefore, we propose the following research question: How can one identify standout researchers among thousands of co-authors in large-scale LLM papers? This question is particularly important in scenarios such as academic hiring and funding decisions. In this paper, we introduce a novel citation metric designed to address this challenge by balancing contributions across large-scale and small-scale publications. We propose the SBCI index, analyze its theoretical properties, and evaluate its behavior on synthetic publication datasets. Our results demonstrate that the proposed metric provides a more robust and discriminative assessment of individual scholarly impact in the era of large-scale collaborations.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




