アーカイブ / LLM
中国語の冗談の判定と生成を一つのモデルで扱うCFunModel
CFunModel
概要
- CFunSetは既存資料と掲示板の冗談を集め、判定、説明、生成、相声の応答選択などの学習例を含む。
- 著者らの報告では、CFunModelの正解率はHumorWBで85.98%、CrossDialの二つの応答選択で91.70%、88.99%だった。
- 生成品質の評価は掲載例による。実務利用には、中国語の自然さと不快な表現の人手確認が必要になる。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、CFunModelの仕組み
- 01中国語の話題・文章
- 02課題の指示を付与
- 03CFunModelが処理
- 04冗談・判定・選択
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
CFunModelは、中国語の文章が面白いかを判定し、話題や書き出しから冗談を作る言語モデルである。冗談は文化的な背景や言葉の含みに依存するため、文として自然でも笑いどころが伝わるとは限らない。
著者らは、既存の中国語ユーモア用データが個別の課題に偏り、複数の課題を学ぶための資料が十分でない点を問題にした。判定から生成までを扱えるデータを整え、そのデータで追加学習したモデルを評価している。
手法
著者らは既存の中国語ユーモア用データを集め、Tieba-JokeBarの投稿やコメントからも冗談を収集した。掲示板の文章はQwen2.5-7B-Instructで絞り込み、資料ごとに「課題の指示、入力、期待する出力」を組み合わせてCFunSetの学習例を作った。例えば、冗談の最初の一文を入力、完成した冗談を出力とする。
CFunSetを使い、Qwen2.5-7B-Instructを教師あり追加学習した。これは入力と望ましい答えの組を示してモデルの応答を調整する方法で、著者らは2回の学習周回を行った。利用時には文章からユーモアの有無を判定し、話題から冗談を作り、相声の台本と選択肢から返答を選ぶ。相声は二人の掛け合いを中心とする中国の話芸である。
新規性
著者らが提示したのは、既存の中国語ユーモア用データに、掲示板Tieba-JokeBarから集めた2万件超の冗談を加えたCFunSetである。全体で16万件超の学習例を含み、判定、説明、生成、相声の応答選択などを扱う。
同じ集合で一つの言語モデルを追加学習し、複数の課題に応答させた点が研究の中心となる。著者らは、中国語のユーモアの生成と処理を扱うモデルとしてCFunModelを提示している。
従来手法との違い
直接の比較対象は、追加学習前のQwen2.5-7B-Instructである。CFunModelはこの基盤モデルをCFunSetで追加学習したもので、両者の正解率から、報告された選択・判定課題での変化を確認できる。
著者らはGPT-4o、GPT-4o mini、DeepSeek-V3とも正解率を比較した。ただし、表の数値は相声の応答選択とユーモア判定に関するものだ。冗談や相声の生成については掲載例による定性的な比較である。
実験結果
著者らはHumorWBの文章を使うユーモア判定と、CrossDialを使う相声の応答選択を正解率で評価した。HumorWBは学習用4,200件、試験用1,091件に分割し、CrossDialの試験データは二つの役割についてそれぞれ4,664件、2,688件だった。
CFunModelの正解率はHumorWBで85.98%、CrossDialの二つの役割で91.70%、88.99%と報告される。基盤モデルは同じ順に79.56%、24.74%、20.87%だった。冗談と相声の生成は掲載例による評価で、同じ形式の正解率は示されていない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：中国語で発信する企業のSNS担当者が、商品紹介に添える短い冗談の候補を作る。担当者が中国語の話題を入力し、出力された候補について、話題との一致、自然さ、失礼な表現の有無を人が確認する。
この生成用途には、CFunSetに含まれるような話題と冗談の対応データが必要になる。面白さの判定ラベルやセンサー入力は、この用途の必須条件ではない。商品分野の表現に合わせる際は、候補を人が選び、修正する工程を加える。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：中国語の話題を数種類用意し、CFunModelと基盤モデルQwen2.5-7B-Instructに同じ入力を与える。出力元を伏せて担当者が読み、話題との一致、表現の自然さ、不快な表現の件数を記録して比べる。
用途に合わせて追加学習するなら、話題と冗談を対応付けた中国語データを用意し、学習用と評価用を分ける。この生成用途に判定ラベルやセンサーは不要である。商品固有の表現への適合は人が評価し、公開前の確認を工程に入れる。
限界と課題
著者らは、掲示板のデータを整理した後も、誤字、文法の誤り、句読点の誤りが残り得ると記している。また、不適切な表現を除く処理を行っても、人を不快にさせる内容が混じる可能性を挙げている。
編集上の検証事項は、対象読者にとって冗談が自然で、公開に適した表現かどうかである。加えて、評価時の温度設定はモデルの説明で0、実験設定で1と記されており、数値の再現には適用条件の確認が要る。
出典
元のタイトル・要旨を確認する（英語）
CFunModel: A "Funny" Language Model Capable of Chinese Humor Generation and Processing
Humor plays a significant role in daily language communication. With the rapid development of large language models (LLMs), natural language processing has made significant strides in understanding and generating various genres of texts. However, most LLMs exhibit poor performance in generating and processing Chinese humor. In this study, we introduce a comprehensive Chinese humor-related dataset, the Chinese Fun Set (CFunSet). This dataset aggregates existing Chinese humor datasets and includes over 20,000 jokes collected from Tieba-JokeBar, a Chinese online platform known for joke sharing. The resulting corpus comprises more than 160,000 entries. Leveraging CFunSet, we developed the Chinese Fun Model (CFunModel), the first large language model designed to handle various Chinese humor-related tasks including Crosstalk Response Selection, Humor Recognition, Joke Generation, etc. Experimental results demonstrate that CFunModel outperforms popular large language models in these tasks. Our CFunSet is available at https://huggingface.co/datasets/ZhenghanYU/CFunSet and CFunModel is available at https://huggingface.co/ZhenghanYU/CFunModel. A demostration video of our work is available at https://youtu.be/MOsISOJ66Ms.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01