[3E5-OS-11b] 政治経済におけるAIの利活用

[3E5-OS-11b-01] ファクトチェックに向けた生成AIの活用に関する一考察

〇渋木 英潔¹、小川 泰弘²、木村 泰知³、乙武 北斗⁴、内田 ゆず⁵、高丸 圭一⁶、門脇 一真⁷、秋葉 友良⁸、佐々木 稔⁹、小林 暁雄¹⁰ (1. 株式会社BESNA研究所、2. 名古屋市立大学、3. 小樽商科大学、4. 福岡大学、5. 北海学園大学、6. 宇都宮共和大学、7. 株式会社日本総合研究所、8. 豊橋技術科学大学、9. 茨城大学、10. 農業・食品産業技術総合開発機構)

キーワード：QA Lab-PoliInfo、ファクトチェック、LLM

近年の生成AIの発展は目覚ましく、従来のNLPでは解決困難だった課題が生成AIによって解決されることも珍しくない。フェイクニュース（ファクトチェック）も解決困難な課題であったため、我々は共有タスクとしてNTCIR QA Lab-PoliInfoを開催してきた。本稿では、NTCIR-17 QA Lab-PoliInfo-4におけるQuestion Answering-2タスクのデータを対象に生成AIによる評価を試み、人手による評価と比較する。