LOCAL LLM / COMPARISON ARCHIVE

ローカルLLMの実力を、
回答と生成物から
確かめる。

学習済みの知識で答える。検索を使って調べる。
そして、ゲームをつくる。
同じ課題への出力を、原文とともに公開します。

歴史レポートの比較へ

4歴史レポートの比較区分

8歴史課題のローカルモデル

2ゲーム課題 / 各9モデル

歴史評価:GPT-6 Astra
ゲーム生成物:採点なし

01 — HISTORY REPORTS

歴史事実の回答を比べる。

題材と検索条件を選んで、
評価と実際の回答を確認できます。

学習済み知識のみ

天安門事件

ローカル8件評価日:2026年10月3日

総合:品質80点 + 速度15点 + 容量5点品質 Q:事実・網羅70点 + 不確実性・帰属10点 + 日本語10点 + 説明・構成10点
天安門事件・学習済み知識のみ。点数は提供された評価書の値。高いほど高評価。
資料内
順位
モデル / 推論設定初回総合点 S/ 100品質点 Q/ 100回答全文
01 Gemma4-26B-A4Bローカル推論設定:オン 76.77/ 100 88/ 100 評価・回答
02 GPT-OSS-120Bローカル推論設定:高 73.52/ 100 84/ 100 評価・回答
03 Nemotron 3 Nano Omniローカル推論設定:オン 71.72/ 100 68/ 100 評価・回答
04 Muse Glimmerローカル推論設定:非常に高い 63.40/ 100 70/ 100 評価・回答
05 GPT-OSS-20Bローカル推論設定:高 59.49/ 100 51/ 100 評価・回答
06 Qwen3.8-27Bローカル推論設定:非常に高い 50.87/ 100 58/ 100 評価・回答
07 Nemotron3-Superローカル推論設定:オン 30.98/ 100 34/ 100 評価・回答
08 Minimax-M2.7ローカル推論設定:記載なし 18.34/ 100 20/ 100 評価・回答

狭い画面では、表を左右にスクロールしてご覧ください。

学習済み知識のみ

安倍元総理暗殺事件

ローカル8件評価日:2026年10月3日

総合:品質80点 + 速度15点 + 容量5点品質 Q:事実・網羅70点 + 不確実性・帰属10点 + 日本語10点 + 説明・構成10点
安倍元総理暗殺事件・学習済み知識のみ。点数は提供された評価書の値。高いほど高評価。
資料内
順位
モデル / 推論設定初回総合点 S/ 100品質点 Q/ 100回答全文
01 Muse Glimmerローカル推論設定:非常に高い 69.40/ 100 79/ 100 評価・回答
02 Gemma4-26B-A4Bローカル推論設定:オン 62.13/ 100 65/ 100 評価・回答
03 Minimax-M2.7ローカル推論設定:記載なし 51.53/ 100 63/ 100 評価・回答
04 Nemotron3-Superローカル推論設定:オン 50.65/ 100 61/ 100 評価・回答
05 GPT-OSS-120Bローカル推論設定:高 43.91/ 100 52/ 100 評価・回答
06 GPT-OSS-20Bローカル推論設定:高 42.40/ 100 28/ 100 評価・回答
07 Qwen3.8-27Bローカル推論設定:非常に高い 39.90/ 100 45/ 100 評価・回答
08 Nemotron 3 Nano Omniローカル推論設定:オン 35.13/ 100 34/ 100 評価・回答

狭い画面では、表を左右にスクロールしてご覧ください。

学習済み知識 + インターネット検索

天安門事件

ローカル8件 + クラウド参考3件評価日:2026年10月2日

総合:品質80点 + 速度20点品質 Q:出典30点 + 要約70点
天安門事件・学習済み知識 + インターネット検索。点数は提供された評価書の値。高いほど高評価。
資料内
順位
モデル / 推論設定基本総合点 G/ 100品質点 Q/ 100回答全文
01 GPT5.6-Terraクラウド参考推論設定:高 94.40/ 100 93/ 100 評価・回答
02 GPT6-Solクラウド参考推論設定:極高 92.86/ 100 98/ 100 評価・回答
03 GPT6-Astraクラウド参考推論設定:極高 92.03/ 100 96/ 100 評価・回答
04 GPT-OSS-120Bローカル推論設定:高 65.07/ 100 78/ 100 評価・回答
05 Gemma4-26B-A4Bローカル推論設定:オン 60.93/ 100 60/ 100 評価・回答
06 MuseGlimmerローカル推論設定:非常に高い 54.30/ 100 61/ 100 評価・回答
07 Minimax-M2.7ローカル推論設定:記載なし 51.93/ 100 64/ 100 評価・回答
08 Nemotron-3-Superローカル推論設定:オン 51.65/ 100 58/ 100 評価・回答
09 Nemotron3-Nano-Omuniローカル推論設定:オン 46.39/ 100 47/ 100 評価・回答
10 GPT-OSS-20Bローカル推論設定:高 45.16/ 100 37/ 100 評価・回答
11 Qwen3.8-27Bローカル推論設定:非常に高い 44.51/ 100 55/ 100 評価・回答

狭い画面では、表を左右にスクロールしてご覧ください。

学習済み知識 + インターネット検索

安倍元総理暗殺事件

ローカル8件 + クラウド参考3件評価日:2026年10月2日

総合:品質80点 + 速度20点品質 Q:出典30点 + 要約70点
安倍元総理暗殺事件・学習済み知識 + インターネット検索。点数は提供された評価書の値。高いほど高評価。
資料内
順位
モデル / 推論設定基本総合点 G/ 100品質点 Q/ 100回答全文
01 Codex-GPT5.6-Terraクラウド参考推論設定:高 90.87/ 100 91/ 100 評価・回答
02 Codex-GPT6-Astraクラウド参考推論設定:極高 86.15/ 100 99/ 100 評価・回答
03 Codex-GPT6-Solクラウド参考推論設定:極高 84.97/ 100 98/ 100 評価・回答
04 MuseGlimmerローカル推論設定:非常に高い 55.67/ 100 68/ 100 評価・回答
05 Gemma4-26B-A4Bローカル推論設定:オン 53.32/ 100 54/ 100 評価・回答
06 Nemotron-3-Superローカル推論設定:オン 42.59/ 100 49/ 100 評価・回答
07 Nemotron3-Nano-Omuniローカル推論設定:オン 41.10/ 100 50/ 100 評価・回答
08 Minimax-M2.7ローカル推論設定:記載なし 37.88/ 100 47/ 100 評価・回答
09 GPT-OSS-120Bローカル推論設定:高 37.33/ 100 41/ 100 評価・回答
10 Qwen3.8-27Bローカル推論設定:非常に高い 36.17/ 100 45/ 100 評価・回答
11 GPT-OSS-20Bローカル推論設定:高 30.40/ 100 13/ 100 評価・回答

狭い画面では、表を左右にスクロールしてご覧ください。

検索なし・検索ありでは、採点基準と実験条件が異なります。総合点や品質点の単純な差から、検索による能力の向上・低下は判断できません。点数は提供された評価書の値であり、正答率ではありません。検索ありのクラウド3件は参考比較として収録しています。

02 — GENERATED GAMES

つくられたゲームを、そのまま。

学習済み知識だけで生成。
ここでは評価・順位付けを行いません。

生成プロンプトと出力原本を掲載しています。動作の可否を含む品質評価や、生成されたプログラムの修正は行っていません。ゲームはリンク先で開きます。音が出る場合があるため、音量にご注意ください。

GPT-6 Astraの参考ゲームは、指定されたサーバー上の配置先へのリンクです。このフォルダーには同梱していないため、ローカル閲覧では開けない場合があります。

03 — ABOUT THIS COMPARISON

数値だけでなく、
根拠も公開する。

インターネット上で示されるローカルLLMの性能を、実際の課題と出力から検証するための掲載ページです。

閲覧・配置の説明
01

評価と元の回答を分けて読む

歴史課題は、GPT-6 Astraと信頼性の高いインターネット情報に基づく提供済み評価を掲載。誤りや言語の混在がある元回答も、そのまま収録しています。評価書から出典を確認できます。

02

実験で得られた範囲を示す

各歴史課題は各モデル1件の保存回答と時間記録に基づきます。モデル全般の能力を断定する結果ではありません。検索の許可と、実際に行われた検索行動も区別して扱います。

03

確認できる資料を手元に残す

個別ページには提示プロンプト、元回答、評価書、実験資料、ゲームのコード原文を同梱。今回の統合に際して、モデルの再実行・再採点・史実の再検証は行っていません。