- 低トラフィックで 7B 以下の小型モデルなら、L4 24GB または RTX 4090 がコスパ最良です
- 高トラフィックの本番運用では A100 80GB / L40S のスループットと VRAM が安定しており、トークン単価が必ずしも高くなるわけではありません
- 常時稼働させるなら必ず月額で計算してください。従量課金で 1 か月回すと月額の 1.5〜2 倍になるのが普通です
| GPUモデル | VRAM | 現においての最低価格 | プラットフォーム | 1日単位 | 7×24 時間常駐(720 時間換算) | |
|---|---|---|---|---|---|---|
| RTX 4090 万能主力カード:Flux 描画、QLoRA による 13B モデルのファインチューニング、動画生成 | 24GB | ¥0.87/時 | Vast.ai(米国) スポット | ¥21 | ¥626 | 価格比較→ |
| L4 24GB 低消費電力の推論専用GPUで、動画トランスコードや軽量推論に高いコストパフォーマンス | 24GB | ¥3.17/時 | RunPod(米国) スポット | ¥76 | ¥2282 | 価格比較→ |
| A100 80GB フルパラメータ微調整(7B)、70B量子化推論、中規模学習タスク | 80GB | ¥5.47/時 | Paperspace(米国) 従量課金 | ¥131 | ¥3938 | 価格比較→ |
| L40S 48GB 48GB GPUメモリ搭載のバランス重視モデル。70B量子化推論およびバッチ推論に対応 | 48GB | ¥5.69/時 | RunPod(米国) スポット | ¥137 | ¥4097 | 価格比較→ |
小型モデル・低トラフィックなら L4 24GB / RTX 4090、本番の高トラフィックなら A100 80GB または L40S 48GB を。常時稼働は月額が前提です。本ページでは 720 時間での月額目安を掲載しています。
モデルサイズと同時接続数によります。量子化した 7B なら 24GB で足りますが、70B や高トラフィックには 80GB が必要です。VRAM 不足は低速化ではなく即 OOM になります。
LLM 推論のデプロイコスト估算|データ出典:GPUコンピューティングパワーレーダー rentgpu.link(2026-10-26 更新,時間あたり自动抓取各プラットフォーム公开定价)|https://rentgpu.link/use/llm-inference|CC BY 4.0