G検定｜語の出現頻度と文書内での珍しさを組み合わせたい

ANSWER & EXPLANATION

正解：C

語頻度を文書間の珍しさで重み付けする指標です。前処理と品質評価を目的ごとに選びます。

選択肢のポイント

• Aパープレキシティは言語モデルの予測の困難さを表す指標です。この設問で求めるものとは異なります。
• B単語誤り率は参照文に対する認識語の誤り割合です。この設問で求めるものとは異なります。
• C正解です。語頻度を文書間の珍しさで重み付けする指標です。
• Dストップワード除去は特定の高頻度語を前処理で外すことです。この設問で求めるものとは異なります。

関連キーワード

• TF-IDF
• 自然言語処理の評価

参考にした公式情報：日本ディープラーニング協会 G検定の試験範囲（シラバス） / 確認日：2026年9月29日