ホーム › 比較ツール › Granite 4.0 H-Tiny 7B-A1B と Mistral Nemo 12B Instruct

Granite 4.0 H-Tiny 7B-A1BvsMistral Nemo 12B Instruct

徹底比較: Granite 4.0 H-Tiny 7B-A1B (7Bパラメータ、IBM) および Mistral Nemo 12B Instruct (12B、Mistral AI)。量子化方式別の必要VRAM容量、比較基準となる4基のGPUで測定したトークン/秒、用途別の評価、ライセンス、インストールコマンド。すべての数値はカタログのデータから算出しており、ページ間でのコピー&ペーストは一切ありません。

要約

特徴 Granite 4.0 H-Tiny 7B-A1B Mistral Nemo 12B Instruct
パラメータ 7B 12B
ファミリー Granite Mistral
著者 IBM Mistral AI
開発国 US FR
ライセンス Apache 2.0 Apache 2.0
コンテキスト 128 000 トークン 128 000 トークン
公開日 2025年10月 2024年7月

メモリフットプリント

平均的なコンテキストウィンドウでの推論に必要なVRAMの概算値です。勝者(緑色)は消費量が moins — 小規模モデルに有利。

量子化 Granite 4.0 H-Tiny 7B-A1B Mistral Nemo 12B Instruct
Q4_K_M(軽量) 4 GB 7 GB
Q5_K_M(バランス型) 5 GB 9 GB
Q8(ほぼ無損失) 7 GB 13 GB
FP16(最高品質) 14 GB 24 GB
CPUのみで実行する場合のRAM 8 GB 16 GB

推定速度(トークン/秒)

各GPUで実行可能な最適な量子化に基づく推定値です。実際の数値はプロンプト、コンテキスト、エンジン(llama.cpp、vLLM、MLX)によって異なります。 方法論.

基準となるGPU Granite 4.0 H-Tiny 7B-A1B Mistral Nemo 12B Instruct
RTX 4090 (24 GB) 350 tok/s · FP16 70 tok/s · FP16
RTX 4080 (16 GB) 180 tok/s · FP16 25 tok/s · Q8
RTX 3060 12GB (12 GB) 60 tok/s · Q8 8 tok/s · Q5_K_M
Apple M4 Pro (48 GB) (36 GB) 180 tok/s · FP16 25 tok/s · FP16

ユースケース別評価

一般的な用途ごとに、タグ、サイズ、専門性に基づいてどちらが最も適しているかを示します。

一般チャット
接戦 — 具体的な条件によって変わります。 この基準では両者同等です。VRAMやライセンスの制約に応じて判断してください。
格調高いフランス語
Mistral Nemo 12B Instruct が優れている。 充実したフランス語コーパスで学習しており、慣用表現をより適切に扱えます。
RAG / 長い文書
接戦 — 具体的な条件によって変わります。 この基準では両者同等です。VRAMやライセンスの制約に応じて判断してください。
エージェント & ツール使用
接戦 — 具体的な条件によって変わります。 この基準では両者同等です。VRAMやライセンスの制約に応じて判断してください。
軽量デプロイ
Granite 4.0 H-Tiny 7B-A1Bが優位です。 より軽量(70億パラメータ)で、控えめなスペックの構成でも動作します。
ローカルAIキット

お使いのマシンで、プライベートかつ無料のChatGPTを1時間で構築 — LM Studio、Ollama、Open WebUI、ご自身のドキュメント、クラウド不要。

  • 永久に利用できるオンラインスペース
  • PDF + ファイル
  • 30日間返金対応

強みと弱み

IBM · 7B

Granite 4.0 H-Tiny 7B-A1B

総パラメータ数 7B、アクティブパラメータ数 1B のハイブリッドモデル。計算コストは極めて低い。エッジ/組み込み向け。

  • 非常に低い計算コスト
  • Apache 2.0
  • 長いコンテキストでも省リソース
  • 一部のタスクでは、3Bの密モデルより品質が低い

インストール

ollama run granite4:tiny-h
Mistral AI · 12B

Mistral Nemo 12B Instruct

NVIDIAと共同開発。コンテキスト長128k、Tekkenトークナイザーを採用し、欧州の複数言語に強みがあります。

  • コンテキスト 128k
  • ヨーロッパの諸言語に強い
  • Apache 2.0:完全に自由に利用可能
  • バランスに非常に優れた12Bモデル
  • 推論能力では Small 3.1 より劣る
  • ビジョン非対応

インストール

ollama run mistral-nemo:12b

よくある質問

RTX 4090(24GB)では、Granite 4.0 H-Tiny 7B-A1BとMistral Nemo 12B Instructのどちらがより快適に動作しますか?

RTX 4090上で、Granite 4.0 H-Tiny 7B-A1Bは、 FP16 (約350トークン/秒)、Mistral Nemo 12B Instructの実行形式は FP16 (~70 tok/s)。純粋な出力速度で Granite 4.0 H-Tiny 7B-A1B が優位です。 構成ツール で、お使いのGPUの機種を指定して試してみてください。

Granite 4.0 H-Tiny 7B-A1BとMistral Nemo 12B Instructでは、フランス語での性能はどちらが優れていますか?

フォーマルなフランス語(執筆、要約、翻訳)には、 Mistral Nemo 12B Instruct 優位に立ちます。充実したフランス語コーパスで学習しているためです。もう一方も使えますが、要求水準の低い用途に限られます。

VRAM消費が最も少ないのはどれか?

Q4_K_M の場合、 Granite 4.0 H-Tiny 7B-A1B 収まる容量 4 GB contre 7 GB 競合モデルとの比較 — RTX 3060や4060 Ti 8GBをターゲットにしている場合、3GBの差は顕著です。

これらのモデルは商用の本番環境で使用できますか?

Granite 4.0 H-Tiny 7B-A1B は Apache 2.0 ライセンスで公開されており、商用利用も自由です。 Mistral Nemo 12B Instruct は Apache 2.0 ライセンスで公開されており、こちらも自由に利用できます。SaaS には Apache 2.0 または MIT を優先してください。

2026 年にどれを選ぶべきか?

主な制約条件によります。 より小さい / より高速 : Granite 4.0 H-Tiny 7B-A1B (7B). より高性能 : Mistral Nemo 12B Instruct(12B)。迷っている場合はこれを起動してください 構成ツール お使いのGPUとユースケースに基づいて判断します。

検討すべき代替案

どちらもご希望に合わない場合は、検討できる類似モデルを以下に紹介します。

さらに詳しく