AI generated thumbnail

RadeonでローカルLLMを動かすROCm環境構築とAPIサーバー作成

所要時間: 約45分 | 難易度: ★★★★☆ この記事で作るもの AMD製GPU(Radeon)の性能を最大限に引き出し、Llama 3やGemma 2などの最新AIモデルを爆速で動かすローカルAPIサーバーを構築します。 Pythonからこのサーバーを呼び出し、RadeonのVRAMをフル活用して推論処理を行うスクリプトまでを完成させます。 ...

2026年9月20日 · 9 分 · 4240 文字 · Negi AI Lab
AI generated thumbnail

AMD GPUでローカルLLMを動かすROCm環境構築の手順

所要時間: 約45分 | 難易度: ★★★★☆ この記事で作るもの AMD製GPU(Radeon)を使って、NVIDIA環境に依存せずに高速な推論を行う「ローカルLLMチャットUI」を構築します。 PythonからROCm(Radeon用の演算プラットフォーム)を介してLlama 3を制御し、Streamlitでブラウザから操作できるアプリを一つ完成させます。 ...

2026年6月25日 · 9 分 · 4054 文字 · Negi AI Lab