[3Win5-17] コード生成能力におけるモデルマージによる言語間転移の促進
キーワード:モデルマージ、転移学習、コード生成
コード生成は、人気の LLM 応用のひとつであるが、日本語プロンプトに対して出力されるコードをみると、どこからこの知識を獲得したのだろうかと不思議に思ったことはないだろうか?実際に、プログラミングに関する専門知識の大半は英語で提供されており、日本語の言語資源のみで十分な知識を獲得するのは困難である。何かしら英語で学んだ知識を日本語から活用する仕組みが働いている、つまり言語間転移が考えられる。しかし言語間転移は原理やメカニズムに未知な部分が多く、特に有効的に促進させる方法がわかっていない。本研究は、モデルマージ手法に焦点をあて、モデルマージがどのようにコード生成の言語間転移を促進するか調査を行なった。
講演PDFパスワード認証
論文PDFの閲覧にはログインが必要です。参加登録者の方は「参加者用ログイン」画面からログインしてください。あるいは論文PDF閲覧用のパスワードを以下にご入力ください。