問題
自然言語処理モデルの評価で注意すべき点として、最も適切な選択肢を1つ選べ。
- A. 自動評価指標だけでなく、タスクによっては人手評価や安全性・事実性の確認も必要になる
- B. 正解率だけを見れば、生成文の品質や事実性は必ず完全に判断できる
- C. 自然言語処理では評価データを用いる必要がない
- D. モデルが出力した文は常に正確で偏りがない
G検定 実践演習の問題です。解説付きで個別に学習できます。
自然言語処理モデルの評価で注意すべき点として、最も適切な選択肢を1つ選べ。
正解はA。自然言語処理、とくに文章生成や要約では、自動評価指標だけで品質や事実性を完全に測れないことがある。タスクによっては人手評価、安全性、事実性、偏りの確認が重要になる。BからDは評価上の注意を無視した不適切な説明である。