アーカイブ / LLM
求人票ごとの重要な能力を抽出し、面接で確認する順序を示す
Requisition-Specific Personal Competency Identification and Prioritization
Requisition-Specific Personal Competency Identification and Prioritizationの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: (A) An example output from our approach. In this example, our approach output two PCs for PMT-1: A “Domain/Team-Specific” PC “Consumer-Facing Techinical Products” with a priority rating of 9 and a “Other Functional” PC “Vendor Management” with a priority rating of 6. (B) An overview of our approach with a toy example using primary call, evaluation, regeneration, filter and validation components. PC justification is omitted from the output to save space. In this example, we want to identify req-specific PCs for PM-31. In the primary call component, we prepare the primary call prompt from the reqs and the most similar example from the example library. In the evaluation component, an LLM evaluates the outputs from the primary call and gives a suggestion to revise PC_2 definition. In the improvement component, an LLM uses the suggestion to improve PC_2 definition and corrects the priority for PC_1 using rules. In the filter component, we filter out PC_3 as it is too similar to “Ownership”, which is an explicitly defined PC to exclude (out-of-scope). In the validation component, we validate each PC label against the standardized competency library and find PC_2’label is too similar to the library PC “Program Management” but with significantly different definitions. Hence, our label refinement LLM refines PC_2 to a different label PC_2_revised to avoid confusion.
概要
- 求人票に固有の能力を抽出し、定義・優先度・求人票中の根拠とともに提示する。
- 二職種各17件の試験では、最上位項目の適合率は10回平均で0.77と0.75だった。
- 評価対象は二職種に限られ、著者らは採用評価に使う初期段階で専門家による全件確認を求めている。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Requisition-Specific Personal Competency Identification and Prioritizationの仕組み
- 01求人票と能力一覧
- 02類似例を使い候補生成
- 03評価して再生成
- 04重複除外と名称検証
- 05根拠付き能力一覧
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
同じ職種名の求人でも、配属先によって必要な知識や技能は異なる。職種全体に共通する能力だけを面接項目に使うと、個別の求人で重視すべき能力を扱いにくい。求人票ごとに何を優先して確かめるかが、採用評価の設計に関わる。
この論文でいう「個人能力」は、仕事の成果に関わる知識・技能・能力を指す。著者らは、個々の求人票に固有の能力を見つけ、重要な順に並べる作業を大規模言語モデルで支援する。
手法
求人票の本文、職種共通の能力一覧、除外項目を入力する。まず文章を数値で表して近さを測る「埋め込み」を使い、確認済みの求人票と能力の例から似たものを探す。基準を満たす例があれば指示文に添え、なければ例示なしで候補を作る。候補には能力名、定義、1～10の優先度、区分、求人票中の根拠を付ける。
次にモデルが候補を評価し、修正案に沿って再生成する。重複や対象外の候補を除き、標準的な能力一覧と照合する。既存項目と名前が似ていても定義が大きく異なる場合は、名前を直す。例えば機械学習チームの求人で求める知識を、職種共通の能力と区別して提示する。
新規性
著者らが新規性として挙げるのは、職種共通の能力と個別の求人票に固有の能力を明示的に分け、後者の抽出と優先順位付けを一連の処理にした点である。既存の能力一覧や指定された除外項目を参照し、対象外の候補を取り除く。
候補の名前が既存項目に似ていても定義が大きく異なる場合は、名前を修正して混同を避ける。開発中には人事・組織心理学の専門家による評価を受け、指示文も更新した。
従来手法との違い
比較の出発点は、職種単位で定めた標準的な能力一覧である。同じプログラムマネジャーでも、機械学習チームの求人なら、その領域に固有の知識が必要になりうる。本手法は求人票を読み、職種共通の一覧だけでは表せない能力を探す。
構成要素を変えた著者らの実験では、類似例を使わない設定で最上位項目の適合率が0.02～0.04低下した。推論を拡張する設定を外した場合は、同適合率が二職種で0.69、0.66となった。いずれも対象データ内での比較である。
実験結果
著者らは2024年のAmazonの二職種の求人票140件を、例示と指示文の調整用26％、指示文の調整用50％、試験用24％に分けた。試験用は職種ごとに17件で、専門家が合意した能力一覧とモデルの出力を照合した。
10回の実行を平均した最上位項目の適合率は、シニア・プログラムマネジャーで0.77、シニア・プロダクトマネジャー技術職で0.75だった。専門家が1回の出力を評価した同適合率は0.76、0.78。優先度6以上で対象外と判定された能力の割合は、両職種とも0.07と著者らは報告する。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：社内の新規採用枠で、面接時に確認する能力の候補を作る。入力には求人票本文、職種共通の能力一覧、除外項目、専門家が能力を確認した求人票の例を用意する。追加のセンサーや候補者の個人情報は、この段階では使わない。
出力は能力名、定義、優先度、求人票中の根拠とする。人事担当者と現場責任者が候補を修正し、承認した項目だけを面接設計に渡す。面接の質への効果は、この運用案とは別に確かめる。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：一つの職種について、過去の求人票本文、職種共通の能力一覧、除外項目、専門家が確認した能力名・定義・順位を集める。追加センサーは使わない。確認済みの例で指示文を調整し、評価用に分けた求人票で出力を測る。
比較基準は、職種共通の能力一覧から面接項目を選ぶ現行手順とする。専門家が両手順について、最上位項目の適切さ、対象外項目の割合、能力の範囲、根拠の正確さを記録する。結果を見て用語や除外条件を調整した場合は、別の求人票で再評価する。
限界と課題
著者らの誤り分析では、最上位項目の誤り8件中6件で正しい能力が候補に含まれず、能力の範囲が広すぎる、または細かすぎる例があった。評価対象は管理職系の二職種で、著者らは他職種への適用を今後の課題としている。指示文とデータは機密保持契約により公開できないという。
編集上の検証事項は、別の職種や能力一覧でも結果が保たれるか、求人票の表現によって順位が変わるかである。採用評価に使う前には、著者らも初期段階で専門家が生成結果を全件確認するよう求めている。
出典
元のタイトル・要旨を確認する（英語）
Scalable Identification and Prioritization of Requisition-Specific Personal Competencies Using Large Language Models
AI-powered recruitment tools are increasingly adopted in personnel selection, yet they struggle to capture the requisition (req)-specific personal competencies (PCs) that distinguish successful candidates beyond job categories. We propose a large language model (LLM)-based approach to identify and prioritize req-specific PCs from reqs. Our approach integrates dynamic few-shot prompting, reflection-based self-improvement, similarity-based filtering, and multi-stage validation. Applied to a dataset of Program Manager reqs, our approach correctly identifies the highest-priority req-specific PCs with an average accuracy of 0.76, approaching human expert inter-rater reliability, and maintains a low out-of-scope rate of 0.07.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01