[2L5-OS-19a] 機械学習品質評価・向上技術

[2L5-OS-19a-02] AI品質評価手法の共有プラットフォーム AITHubの開発

〇中川 尊雄¹、成田 顕一郎¹、 岩瀬 優太¹、金 京淑¹ (1. 国立研究開発法人産業技術総合研究所)

キーワード：AIシステム、品質保証

機械学習技術の産業応用にあたって、機械学習コンポーネントの品質評価は重要なテーマであり、様々な業界団体がAI品質評価の標準やガイドラインを提案してきた。こうした情報は一般に文書形式で提供されており、実践においてあ、適切な評価手法の選定、評価プログラムの実装が必須である。一部の評価手法は実行可能な形式で提供されるが、タスク、モデルアーキテクチャ、データ形式やフレームワークのバージョンなど、様々な要因のために適用までのギャップは大きい。そこで本研究では、AI品質評価手法の検索・再利用を難しくする課題を分析し、FAIRなAI品質評価手法の共有を目指すプラットフォーム AITHubの設計について紹介する。