ITメディアニュースによると、GMOグループのGMOメディアは、大規模言語モデル（LLM）に国家試験「ITパスポート試験」を解かせてみた結果を発表した。
6種類のLLMを比較し、IT分野に詳しいLLMはELYZAのLLMであることがわかった。
また、日本語の理解を評価するベンチマーク「JGLUE試験」も実施し、GPT-4が最も高い正答率を示した。
さらに、LLMにヒントを与えた場合でも、全てのLLMで正答率が向上することが分かった。
研究チームは、LLMは一定の精度でIT分野の正確な解答を期待できるため、ITパスポート試験の学習においても活用方法が有効であると結論付けた。
大規模言語モデル（LLM）に国家試験「ITパスポート試験」を解かせてみた──そんな研究成果をGMOグループのGMOメディ…
国内外の最新AIに関する記事やサービスリリース情報を、どこよりも早くまとめてお届けします。
日々BizAIdeaに目を通すだけでAIの最新情報を手軽にキャッチアップでき、
AIの進化スピードをあなたのビジネスの強みに変えます。
SNSをフォローして頂くと、最新のAI記事を最速でお届けします！
X: https://twitter.com/BizAIdea
Facebook: https://www.facebook.com/people/Bizaidea/61554218505638/