アーカイブ / LLM
特許の先行技術検索で関連文書を残しながら候補を絞る「FullRecall」
FullRecall
概要
- 国際特許分類を手掛かりに語句を作り、選んだ名詞句で候補を検索して順位を付ける。
- 著者らが報告した5件のテストケースでは、初期検索後と順位付け後の再現率がともに100%だった。
- 導入判断には、対象分野での見落としに加え、順位付け後に人が読む候補件数の確認が必要である。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、FullRecallの仕組み
- 01調査対象の特許
- 02分類に沿う語句生成
- 03名詞句で候補検索
- 04順位付き候補文書
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
FullRecallは、特許の先行技術調査で関連文書を見つけ、その候補に順位を付ける手法である。先行技術は出願より前に知られていた技術を指し、発明の新規性や進歩性を検討する材料になる。
特許文書は複雑で、関連文書の見落としが調査の判断に影響し得る。そこで重要になる再現率は、実際に関連する文書のうち検索で見つかった割合である。候補を絞る際にもこの割合を保てるかが課題となる。
手法
FullRecallは、調査対象の特許を表す検索式を作り、文書群から候補を取得して順位を付ける。まず国際特許分類(IPC)を手掛かりに内容を表す語句を生成し、そこから名詞句を抽出する。名詞句とは「冷却構造」のように物や仕組みを表す語のまとまりである。
抽出した語句から上位k個を選んで検索式を組む。kは選ぶ語句の数を表す。例えば冷却構造を扱う特許なら、その文書と分類に沿う語句を使って候補を探し、得られた集合を順位付けして絞る。語句の順位、kの選び方、文書の順位付けの計算方法は確認できた本文の範囲では示されていない。
新規性
FullRecallの主張する進歩は、国際特許分類を手掛かりに作った語句から検索式を組み、候補取得と順位付けを続けて行う点にある。著者らは、両段階で関連文書を保持したと報告する。
5件のテストケースでは、順位付けで候補集合を縮めた後も再現率100%だった。ただし、何件まで減らしたかは確認できた本文の範囲では分からない。
従来手法との違い
著者らはHRR2とReQ-ReCを比較対象に挙げる。FullRecallでは、分類情報に基づく語句生成と名詞句の選択で候補を検索し、得られた集合に順位を付ける。比較手法の処理手順は、確認できた本文の範囲では示されていない。
報告された5件では、FullRecallの再現率はすべて100%で、両比較手法の値を上回った。この差は当該テストケースの結果であり、別の技術分野や文書集合での差までは示さない。
実験結果
著者らは5件のテストケースで再現率を比較し、FullRecallは全件で100%だったと報告する。HRR2はケース順に10%、25%、33.3%、0%、14.29%、ReQ-ReCは50%、25%、0%、0%、0%だった。これらは関連文書のうち取得できた割合の比較である。
著者らによれば、初期検索でも関連文書をすべて取得し、順位付け後も再現率100%を保った。確認できた本文の範囲では、データセット、各ケースの関連文書数、候補の削減件数、順位付け後に残す条件は分からない。したがって、候補を読む負担がどれだけ減ったかは数値で評価できない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:出願前の調査で、担当者が冷却構造に関する調査対象の特許文書を入力し、順位付きの既存特許候補を受け取る。担当者は上位から内容を読み、関連性の判断を調査記録に残す。
必要な元データは検索対象の特許文書、調査対象の文書、国際特許分類の情報である。検証には人が判定した関連文書の正解ラベルを用意する。センサー入力は想定せず、対象分野で語句の選択と順位付けの条件を調整する。学習用データの要否は本文から判断できない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:対象分野の特許文書と分類情報を検索用に集め、過去の調査案件から問い合わせに使う文書を選ぶ。専門担当者が関連文書の正解ラベルを付ける。学習用データの要否は本文で確認できないため、まず検証用データを用意する。センサーは使わない。
同じ案件に現在の検索手順とFullRecall型の検索・順位付けを適用し、段階ごとの再現率と担当者が読む候補件数を測る。見落とした文書があれば、語句選択と順位付けのどこで外れたかを調べ、対象分野に合わせた条件調整に使う。
限界と課題
確認できた本文の範囲では、著者が明示した制約は読み取れない。報告された再現率100%は5件のテストケースでの値であり、未知の出願でも関連文書を必ず発見できるという根拠にはならない。
編集上の検証事項は、関連文書の正解の定め方、検索対象の範囲、順位付け後の候補件数、分野による結果の違いである。候補が多ければ人手の確認負担が残るため、見落としと読む件数を併せて測る必要がある。
出典
元のタイトル・要旨を確認する(英語)
FullRecall: A Semantic Search-Based Ranking Approach for Maximizing Recall in Patent Retrieval
Patent examiners and inventors face significant pressure to verify the originality and non-obviousness of inventions, and the intricate nature of patent data intensifies the challenges of patent retrieval. Therefore, there is a pressing need to devise cutting-edge retrieval strategies that can reliably achieve the desired recall. This study introduces FullRecall, a novel patent retrieval approach that effectively manages the complexity of patent data while maintaining the reliability of relevance matching and maximising recall. It leverages IPC-guided knowledge to generate informative phrases, which are processed to extract key information in the form of noun phrases characterising the query patent under observation. From these, the top k keyphrases are selected to construct a query for retrieving a focused subset of the dataset. This initial retrieval step achieves complete recall, successfully capturing all relevant documents. To further refine the results, a ranking scheme is applied to the retrieved subset, reducing its size while maintaining 100% recall. This multi-phase process demonstrates an effective strategy for balancing precision and recall in patent retrieval tasks. Comprehensive experiments were conducted, and the results were compared with baseline studies, namely HRR2 [1] and ReQ-ReC [2]. The proposed approach yielded superior results, achieving 100% recall in all five test cases. However, HRR2[1] recall values across the five test cases were 10%, 25%, 33.3%, 0%, and 14.29%, while ReQ-ReC [2] showed 50% for the first test case, 25% for the second test case, and 0% for the third, fourth, and fifth test cases. The 100% recall ensures that no relevant prior art is overlooked, thereby strengthening the patent pre-filing and examination processes, hence reducing potential legal risks.
論文要旨に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




