minimind

MiniMindは、小規模な言語モデルをゼロから学びながら訓練するオープンソースプロジェクトです。実際の訓練や微調整を通じてLLMの仕組みを学べます。

Xで共有ライセンス: Apache-2.0

概要

MiniMindは、小規模な言語モデルをゼロから構築・訓練し、LLMの内部を学ぶためのオープンソースプロジェクトです。高水準の訓練抽象化に頼らず、PyTorchによるモデル構造と、事前学習、教師あり微調整、LoRA、選好最適化、ツール利用、蒸留までの訓練手順を提供します。コードを読みながら個人のGPUで訓練し、モデルを評価し、軽量APIやチャット画面で利用できます。データセットとトークナイザー訓練コードも含まれます。

主な特長

  • PyTorchによるモデル構造とトークナイザー訓練コード
  • 事前学習、微調整、LoRA、選好最適化、ツール利用、蒸留の訓練手順
  • データセットとモデル評価のサポート
  • 軽量APIサーバーとStreamlitチャット画面

こんな人・用途に

LLMの内部を理解するため、小規模モデルの訓練を再現したい学習者や開発者に向いています。個人のGPUでの実験に適しています。

アップストリーム
jingyaogong/minimind
GitHubのフォーク
Guo-astro/minimind
アップストリームのスター数
64k
カテゴリ
AIエージェントとLLMツール
ライセンス
Apache-2.0
フォーク日
2026-10-14
同期状態
同期済み最終同期 2026-10-17