Apple SiliconでLLMを動かすならMLX一択！MLX 使い方 入門
所要時間: 約30分 | 難易度: ★★☆☆☆ この記事で作るもの この記事を読めば、Apple Silicon搭載MacでLlama 3などの最新LLMをMLXで高速に動かし、Pythonから制御するチャットスクリプトを自作できるようになります。 MLXフレームワークを使ったローカルLLM実行環境 Llama 3 (8B) を4-bit量子化で動かすPythonスクリプト 1秒間に約50〜100トークンを生成する高速な推論体験 前提知識として、ターミナルでコマンドが打てることと、Pythonの基礎（変数や関数の概念）が必要です。 複雑な機械学習の数式は一切使いません。 ...