【入門】AIのモデル名とは Claudeの小型と大型を48回比べた
AIのモデル名は、同じサービスの中で性能と速さの違う複数のAIを区別するための名前。小型と大型でどれだけ答えが変わるかを、Claudeのhaiku(小型)とsonnet(大型)で測った。12種の課題を各2回、計48回聞いた結果、正答はhaikuが21/24、sonnetが24/24。これは Claude の小型と大型の差の実測で、ChatGPTのモデルの差の実測ではない。ChatGPTのモデル名と料金は、公式ページを開けず確認できなかったので書かない。
2026-10-01に開いて内容を確認した。
- Models overview https://platform.claude.com/docs/en/about-claude/models/overview
- Pricing https://platform.claude.com/docs/en/about-claude/pricing
ChatGPTの公式ページは編集部の取得で拒否され(HTTP 403)、ChatGPTのモデル名の説明は書かない。
公式の一覧では、名前は系列名(Haiku・Sonnet・Opus)と版数でできている。公式の説明は、Haikuが「近い最先端の知能を持つ最速のモデル」、Sonnetが「速さと知能の最良の組み合わせ」、Opusが「長時間のコーディングや知的作業向け」。
| モデル | 入力($/100万トークン) | 出力($/100万トークン) |
|---|---|---|
| Haiku 4.5 | 1 | 5 |
| Sonnet 5.5 | 2 | 10 |
| Opus 5.5 | 4 | 20 |
試した sonnet は生ログの model_id が claude-sonnet-5。料金ページでは Sonnet 5 も2ドル・10ドルと書かれている。
実行日 2026-10-01。モデルは claude-haiku-4-5-20251001 と claude-sonnet-5(生ログの model_id)。ツール無し・Web検索無し。課題は要約・計算・論理・言い換え・形式の指示・ひっかけ・文字数え・日付計算の12問で、各モデル2回ずつ。採点は答えの一致や条件の有無による機械判定。
プロンプトの例(日付計算)。
2026年10月1日の100日後は何年何月何日ですか。「○○○○年○月○日」の形で、日付だけ答えてください。
| 課題の種類 | haiku | sonnet |
|---|---|---|
| 要約 | 2/2 | 2/2 |
| 計算 | 4/4 | 4/4 |
| 論理 | 4/4 | 4/4 |
| 言い換え | 2/2 | 2/2 |
| 指示順守 | 3/4 | 4/4 |
| ひっかけ | 4/4 | 4/4 |
| 数え上げ | 2/2 | 2/2 |
| 日付計算 | 0/2 | 2/2 |
| 合計 | 21/24 | 24/24 |
差が出なかった課題は12問中10問(要約・計算2問・論理2問・言い換え・3行の文章の指示・ひっかけ2問・文字数え)。論理パズルの1問は、初回の採点で「答え: B」の表記を取りこぼして haiku を0/2と誤判定した。原文を読んで採点式を直し、2/2にした。
生ログ: EXP-40 の全記録
日付の問題で、haikuは2回とも「2027年1月8日」と答えた。正しくは2027年1月9日で、sonnetは2回とも正しく答えた。形式の指示では、haikuが1回、「コードブロック記号は付けない」と書いたのにJSONをコードブロックで囲んだ。
2027年1月8日(haikuの回答・正解は2027年1月9日)
応答時間の中央値は haiku 4.2秒、sonnet 2.9秒。平均は haiku 8.6秒、sonnet 4.1秒で、この測定ではsonnetのほうが速かった。公式の一覧はHaiku 4.5の思考方式を「Extended」(拡張思考)としている。これが所要時間に影響した可能性はあるが、確かめてはいない。
- 各課題2回ずつで、差が偶然の範囲かは言えない。
- 12問は日本語の短い課題で、長文の作成やコードは試していない。
- ChatGPTの無料版と有料版、miniと標準の差は試していない。ここで比べたのはClaudeの小型と大型だけ。
- 12問中10問は、小型でも大型でも同じ正答だった。
- 差が出たのは日付計算(haiku 0/2・sonnet 2/2)と、JSONの形式指定(haiku 1/2・sonnet 2/2)。
- 速い軽い作業は小型で足りるが、数字や形式を厳密に求める作業は大型を試す価値がある。
出典
- Claude Docs: Models overview — https://platform.claude.com/docs/en/about-claude/models/overview — 確認日 2026/10/01
- Claude Docs: Pricing — https://platform.claude.com/docs/en/about-claude/pricing — 確認日 2026/10/01