表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

医学文献の一次選別を前に進める、査読者の判断で順位が変わる検索画面

DenseReviewer

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理
原論文の図

DenseReviewerの原論文から掲載した図です。細部はクリックして拡大できます。

原論文の図の説明を読む

Figure 1 : Ranking mode. 1 contains the PICO query. 2 lists the studies; users can use keyboard or mouse controls to expand a study to read and judge. Assessed studies are highlighted in purple. 3 contains page controls, with a pause button to save the review’s progress and toggles to stop upon reaching the last page. 4 shows two pie charts that display the ratio of reviewed to unreviewed studies and the distribution of judgements and a line chart that displays the relevance discovery curve, indicating the saturation of relevant studies throughout the screening progresses. 5 allows users to enter focus mode (see Figure  2 ).

出典:DenseReviewer / arXiv ↗

概要

  • DenseReviewerはPubMed文献とPICO条件を入力し、タイトル・要旨の確認順を提示する。
  • 担当者の採用・除外判断を受け、未判定文献の順位を更新する。
  • 本稿はツールのデモが中心で、新たな性能比較の具体的な数値は確認できない。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、DenseReviewerの仕組み

左から右へ読む
  1. 01PubMed文献とPICO
  2. 02類似度で順位付け
  3. 03採否を入力
  4. 04未判定文献を再順位付け

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

DenseReviewerは、医学の系統的レビューで候補文献のタイトルと要旨を読む順番を付けるツールである。系統的レビューは定めた条件に沿って研究を集め、結果をまとめる作業で、関係する研究を取りこぼさないことが重要になる。

候補は数万件に及ぶこともあり、一件ずつの確認に時間がかかる。関連性が高そうな文献を早く見つけられれば、担当者は後続の作業を進めやすくなる。

手法

利用者はPubMedのnbib形式で文献を登録し、PICOでレビューの条件を入力する。PICOは患者・対象集団、介入、比較、結果を分けて書く枠組みである。密な検索は、文章を意味を反映した数値の並びに変え、条件との近さで文献を並べる方法を指す。画面には順位付き一覧と、一件の要旨を集中して読む表示がある。

担当者が各文献を採用または除外と判定すると、その情報を使って検索条件の数値表現を更新する。これはRocchio法と呼ばれる、採用例へ近づき除外例から離れるよう検索の向きを調整する方法である。ページを評価した後、未判定文献を並べ直し、次の確認順を提示する。

新規性

本稿の中心は、著者らの先行研究で示した密な検索による選別方法を、利用者が操作できるWeb画面と実験用のPythonライブラリにまとめた点である。順位付き一覧と、一件ずつ読む集中表示の両方を備える。

採否の人手判断を受けて検索用の数値表現を更新し、未判定の文献を再順位付けする。画面、保存機構、再順位付け処理を含む構成が示されており、研究者が新しいフィードバック方法を試すための入口にもなる。

従来手法との違い

本文ではASReview、Covidence、DistillerSR、RobotAnalystなどの選別ツールと、画面形式や中核方式を比較している。DenseReviewerはタイトル・要旨の順位付き一覧と一件表示を備え、利用者の採否判断で検索順位を更新する。

著者らは先行研究の密な検索方式が、ロジスティック回帰やBERTを用いた能動学習方式より有効で、従来型機械学習に近い効率だったと述べる。ただし、このデモ論文の確認できた本文の範囲では、その比較の数値や再現条件は示されていない。

実験結果

本稿はWebツールの動作と構成を紹介している。アップロードする各文献にはPubMed ID、題名、要旨、著者名が必要とされる。画面は順位付き一覧と一件表示を備え、判定済み件数などの進捗表示も示されている。

著者らは、密な検索による先行方式が従来の能動学習方式より有効で効率的だったと述べる。ただし、この論文の確認できた本文の範囲では、新たな評価データの件数、再現率、所要時間などの数値は確認できない。デモの提示と性能の実証は分けて読む必要がある。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:医学分野の系統的レビューで、検索して得た多数の候補論文から、タイトルと要旨を読む順番を決める。入力はPubMedから得たnbib形式の文献群と、患者、介入、比較、結果を記したPICO条件である。

担当者が上位から各文献の採用・除外を判断すると、残りの順位が更新される。出力は次に確認する文献の一覧と判定記録であり、最終的な採否判断と全文確認はレビュー担当者が行う。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:完了済みのレビューから、最終的に採用された文献が分かる候補群を選ぶ。PICO条件を入力し、DenseReviewerが示す順に少数ずつ判定を戻して、残りの順位がどう変わるかを見る。

元の確認順と比べ、採用文献の80%、95%を見つけるまでに何件読む必要があるかを測る。担当者が採否を修正した場合の順位変化と、判定履歴を追えるかも併せて確認する。

限界と課題

本稿は利用画面と構成を示すデモ論文で、確認できた本文の範囲では新たな定量評価の条件と結果を詳述していない。著者らは、除外条件の入力、PICOに関係する語句の強調、判断の自動化を今後の機能として挙げている。

編集上の検証課題は、重要文献が順位の下位に残った場合にどこまで確認を続けるか、初期の採否判断が誤った場合に順位がどう変わるかである。保存した進捗と判断の追跡性も運用時に確かめたい。

応用先の候補
研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

DenseReviewer: A Screening Prioritisation Tool for Systematic Review based on Dense Retrieval

Screening is a time-consuming and labour-intensive yet required task for medical systematic reviews, as tens of thousands of studies often need to be screened. Prioritising relevant studies to be screened allows downstream systematic review creation tasks to start earlier and save time. In previous work, we developed a dense retrieval method to prioritise relevant studies with reviewer feedback during the title and abstract screening stage. Our method outperforms previous active learning methods in both effectiveness and efficiency. In this demo, we extend this prior work by creating (1) a web-based screening tool that enables end-users to screen studies exploiting state-of-the-art methods and (2) a Python library that integrates models and feedback mechanisms and allows researchers to develop and demonstrate new active learning methods. We describe the tool's design and showcase how it can aid screening. The tool is available at https://densereviewer.ielab.io. The source code is also open sourced at https://github.com/ielab/densereviewer.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-09-29