ITちゃんねる

仕事に役立つIT関連の最新ニュース

日本語のAIで使う大規模言語モデル性能を評価する「オープン日本語LLMリーダーボード」公開

日本語のAIで使う大規模言語モデル性能を評価する「オープン日本語LLMリーダーボード」公開

16種類以上のNLP(自然言語処理)タスクを用いて日本語の大規模言語モデル(LLM)の性能評価と分析を行う「オープン日本語LLMリーダーボード」が公開されました。構築には国立情報学研究所をはじめとする日本語LLMの研究開発を行う組織横断プロジェクト「LLM-jp」が携わっています。