G検定｜文章から助詞など検索に不要な頻出語を除きたい

ANSWER & EXPLANATION

正解：D

特定の高頻度語を前処理で外すことです。前処理と品質評価を目的ごとに選びます。

選択肢のポイント

• A見出し語化は単語を辞書形に正規化する処理です。この設問で求めるものとは異なります。
• Bパープレキシティは言語モデルの予測の困難さを表す指標です。この設問で求めるものとは異なります。
• C単語誤り率は参照文に対する認識語の誤り割合です。この設問で求めるものとは異なります。
• D正解です。特定の高頻度語を前処理で外すことです。

関連キーワード

• ストップワード除去
• 自然言語処理の評価

参考にした公式情報：日本ディープラーニング協会 G検定の試験範囲（シラバス） / 確認日：2026年9月29日