モデルが一致しない場合：公開コメント分析向けLLM評価の再考

ニュース概要

連邦機関は公開コメント・コーパスを分類するために大規模言語モデル（LLM）を展開しており、モデルの記録の編成は政策立案者が見るものと登録される議論を形作ります。小規模な検証セットに対する姿勢精度に基づく標準的な評価は、モデルが相違する時期を検出できません。