VRAM別ベンチマーク

VRAM 12GB で動くモデル

VRAM 12GB のGPUで実測したローカルLLMを、生成速度や量子化方式から比較できます。

← 全ベンチマークへ戻る

生成速度グラフ

VRAM 12GB の tokens/sec 比較
tokens/secMistral 7B (Q4_K_M) — RTX 3060 / lm-studio37.9Llama 3.1 8B (Q4_K_M) — RTX 3060 / ollama33.6

比較表

列見出しで並べ替え、backend と GPU の選択欄で絞り込みができます。

ローカルLLMの実測ベンチマーク比較表
Mistral 7BQ4_K_MRTX 306012lm-studio37.98,1922026-03-18
Llama 3.1 8BQ4_K_MRTX 306012ollama33.68,1922026-02-21