llmfit

CPU、RAM、GPUを調べ、そのマシンで快適に動かせるオープンソースの言語モデルを提案するCLIです。

Xで共有ライセンス: MIT

概要

llmfitは、手元のハードウェアを調べ、快適に動かせるオープンソースの言語モデルを提案するRust製のコマンドラインツールです。CPUコア、システムRAM、GPU、VRAM、アクセラレータ構成を調べ、代表的な量子化を含めてモデルを推薦します。ターミナル画面で実際の速度を測り、結果をプロジェクトに提出することもできます。

主な特長

  • CPU、RAM、GPU、VRAM、ユニファイドメモリを検出
  • NVIDIA CUDA、Apple Silicon、AMD ROCm、Intel OneAPIに対応
  • 主要な量子化ごとにモデルを推薦
  • ターミナル画面で実際のトークン毎秒を計測
  • 自分の計測値が適合表の推定値を置き換える

こんな人・用途に

ローカルLLMを選ぶ際に、ダウンロード前に自分のマシンで動くか知りたい人向けです。計測しない場合の数値は推定です。

アップストリーム
AlexsJones/llmfit
GitHubのフォーク
Guo-astro/llmfit
アップストリームのスター数
37k
カテゴリ
AIエージェントとLLMツール
ライセンス
MIT
フォーク日
2026-02-22
同期状態
アップストリームと分岐