アーカイブ / LLM
企業文書から技術候補を抽出し、関連度順に示すSTARS
STARS
STARSの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Overview of the Framework for Technology Landscape Mapping: STARS.
概要
- 企業関連文書から技術候補を抽出して企業を要約し、Sentence-BERTによる意味上の近さで技術を順位付けする。
- 著者らの6,597社のデータでは、企業から技術を探すP@3はSTARSが0.762、CoT promptingが0.667だった。
- 実務では候補を元文書で確認し、関連度の順位を技術の実利用や事業上の重要度と同一視しない。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、STARSの仕組み
- 01企業関連文書
- 02技術候補と企業要約
- 03技術か判定
- 04意味の近さで順位付け
- 05企業別の技術一覧
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
STARSは、企業に関する文章から技術候補を見つけ、企業との関連度順に示す手法である。提携先の調査や市場の把握では、企業が扱う技術を形式の異なる文書から確認する必要がある。
著者らは、従来のキーワード検索では大量で多様な文章を扱いにくく、新しい技術や明記されていない技術を拾いにくいと指摘する。候補を抽出するだけでなく、企業の説明と照らして並べることを課題にしている。
手法
入力は企業サイト、特許、求人票などの企業関連文書である。大規模言語モデルに前の結果を次の指示へ渡す段階的な指示を与え、候補となる語を抽出し、企業を要約して、その語が技術かどうかを判定する。この指示法をChain-of-Thoughtと呼び、判定には少数の例と既存の技術ラベルも使う。
次にSentence-BERTで、技術の名称と定義、企業の要約などを数値の並びに変換する。企業の表現には、要約と抽出した技術の表現を集約すると記されている。その上で、数値の向きの近さを示すコサイン類似度により技術を並べる。例えば文書から「ブロックチェーン」を候補にした場合、企業との近さを計算する。技術定義はWikipediaから得るか、モデルで生成する。
新規性
STARSは、大規模言語モデルによる技術候補の抽出、企業の要約、技術かどうかの判定を、Sentence-BERTによる順位付けにつなぐ枠組みである。段階的な指示と少数の判定例を使い、文書に技術名が明記されていない場合も文脈から候補を推定する。
順位付けには、企業の説明と技術の名称・定義を数値で表した結果を使う。抽出した候補を列挙するだけでなく、企業との意味上の近さに応じて並べる点が著者らの主張する前進である。
従来手法との違い
著者らは、単一の指示を使う「Single Prompt」、段階的な指示を使う「CoT prompting」と検索結果を比較した。この表では全方式の順位付けにSentence-BERTを使っている。ただし、表から各方式の指示文や例示以外の条件がどこまで同じかは確認できない。
順位付け手法については、語の出現に基づくTF-IDFとChatGPTが生成したスコアも比較した。著者らは、記載された企業と技術の検索課題でSTARSが高い精度を得たと報告する。結果の範囲は、このデータと評価設定に限られる。
実験結果
著者らは、Crunchbaseの産業分類から技術関連として選んだ176分類について、各分類の最初のページに載る企業を各50社収集し、計6,597社のデータで評価した。企業から技術を探す課題と、技術から企業を探す課題を設定した。P@kは上位k件に占める正解の割合で、kは3、5、7、10である。
著者らの表では、企業から技術を探すP@3はSTARSが0.762、CoT promptingが0.667、Single Promptが0.583だった。逆方向は順に0.725、0.628、0.582である。順位付けの比較では、上位3件の値をSTARSで0.762、ChatGPTのスコアで0.604、TF-IDFで0.561と報告する。正解の作成手順やデータ分割の詳細は確認できた本文の範囲では不明である。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：提携先を調べる担当者が、対象企業に対応付けた公開サイト、特許文書、求人票を入力する。出力は企業ごとの技術候補一覧とし、担当者が元文書に戻って記述を確認してから、面談で確かめる項目を作る。順位だけで採否は決めない。
実施には企業別の文書、比較に使う技術名と定義、技術か否かを示す少数の例が必要になる。対象分野の語彙と指示文を調整し、評価用には担当者が文書を読んで判定した企業・技術の組を別に用意する。入力は文書であり、追加のセンサーは想定しない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象分野と企業群を小さく定め、各企業に対応付けた公開文書を集める。技術名・定義の一覧と技術か否かを示す少数の例を用意し、担当者が文書を読んで企業・技術の正解組を付ける。文書の更新日を記録し、追加のセンサーは使わない。
自社の用語に合わせて語彙と指示文を調整し、同じ文書でSTARS型の処理と単一指示による抽出を比べる。上位3件と5件のP@k、元文書で確認できた候補の割合、推定だけで挙がった誤候補数、企業ごとの確認時間を測る。
限界と課題
確認できた本文の範囲では、著者らは具体的な失敗例や、別の企業群での精度を示していない。プライバシーへの配慮は今後の方向として挙げている。正解の作成手順、データ分割、順位付けに使う企業表現の集約方法も、再現に十分な詳細までは読み取れない。
編集上の検証事項は、文脈から推定した候補が実際に利用されているか、求人票などに現れた語が過大に評価されないか、生成した要約や技術定義が元文書と整合するかである。意味上の近さを、導入規模や事業上の重要度そのものと読み替えない確認も要る。
出典
元のタイトル・要旨を確認する（英語）
Technology Mapping with Large Language Models
In today's fast-evolving business landscape, having insight into the technology stacks that organizations use is crucial for forging partnerships, uncovering market openings, and informing strategic choices. However, conventional technology mapping, which typically hinges on keyword searches, struggles with the sheer scale and variety of data available, often failing to capture nascent technologies. To overcome these hurdles, we present STARS (Semantic Technology and Retrieval System), a novel framework that harnesses Large Language Models (LLMs) and Sentence-BERT to pinpoint relevant technologies within unstructured content, build comprehensive company profiles, and rank each firm's technologies according to their operational importance. By integrating entity extraction with Chain-of-Thought prompting and employing semantic ranking, STARS provides a precise method for mapping corporate technology portfolios. Experimental results show that STARS markedly boosts retrieval accuracy, offering a versatile and high-performance solution for cross-industry technology mapping.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01