AI generated thumbnail

google/skills 連携エージェントの実装を加速させるGoogle公式の「道具箱」

注意: 本記事はドキュメント・公開情報をもとにした評価記事です。コード例はシミュレーションです。 3行要約 AIエージェントがGoogleの各サービス(Search, Maps, YouTube等)を操作するための「公式ツールセット」である 各APIの複雑なスキーマ定義をカプセル化し、LLMが理解しやすい形式で関数呼び出し(Function Calling)を可能にする Googleエコシステムに特化したエージェントを作りたい開発者は必須だが、汎用的なRAG構築には不要なケースもある 📦 この記事に関連する商品(楽天メインで価格確認) ...

2026年6月9日 · 9 分 · 4362 文字 · Negi AI Lab
AI generated thumbnail

Jetson Orin NXでローカルAIエージェント「Hermes」を動かす実践ガイド

所要時間: 約60分 | 難易度: ★★★★☆ この記事で作るもの Jetson Orin NXという省電力なエッジデバイス上で、外部APIを一切使わずに自律的に思考・実行する「Hermes Agent」を構築します。この記事の手順を完了すると、デバイス内で完結したプライベートなAIアシスタントがコマンドラインから利用可能になります。 ...

2026年6月9日 · 8 分 · 3940 文字 · Negi AI Lab
AI generated thumbnail

llama-cpp-pythonで自分だけのLLM推論ベンチマークを計測する方法

所要時間: 約40分 | 難易度: ★★★☆☆ この記事で作るもの 自分のPC上でローカルLLMの推論速度(Tokens Per Second)と応答遅延(TTFT)を正確に計測するPythonスクリプト 特定のモデル(Llama 3やQwen 2など)が自分の業務で使い物になるかを「数字」で判断する基準 前提知識:Pythonの基本的な構文(変数、関数)がわかり、ターミナルでコマンド操作ができること 必要なもの:NVIDIA製GPU(VRAM 8GB以上推奨)またはApple Silicon搭載Mac、Python 3.10以降 📦 この記事に関連する商品(楽天メインで価格確認) ...

2026年6月9日 · 9 分 · 4062 文字 · Negi AI Lab
AI generated thumbnail

llama.cppでGemma 4のMTPを動かす方法

所要時間: 約30分 | 難易度: ★★★★☆ この記事で作るもの llama.cppの最新機能を活用し、Gemma 4(およびMTP対応モデル)の推論速度を最大化するローカル実行環境を構築します。単に動かすだけでなく、Multi-Token Prediction(MTP)の恩恵をフルに受けるためのビルド設定と、Pythonから高速に呼び出すためのAPIサーバー化までを完結させます。 ...

2026年6月8日 · 9 分 · 4270 文字 · Negi AI Lab
AI generated thumbnail

llama.cppでKVキャッシュを最適化し推論を高速化する方法

所要時間: 約40分 | 難易度: ★★★★☆ この記事で作るもの llama.cppの最新最適化(KVキャッシュのコピー回避)を適用した、長文コンテキストに強いローカルLLM推論環境を構築します。 具体的には、GitHubの最新ソースコードからビルドを行い、Pythonから高速化されたKVキャッシュの恩恵をフルに受けるためのベンチマーク兼推論スクリプトを作成します。 この記事を読み終える頃には、あなたのPCでLLMのレスポンスが物理的に「軽く」なっているはずです。 ...

2026年6月8日 · 10 分 · 4584 文字 · Negi AI Lab
AI generated thumbnail

turbovec レビュー:Rust製ベクトル検索の破壊的パフォーマンスを検証

注意: 本記事はドキュメント・公開情報をもとにした評価記事です。コード例はシミュレーションです。 3行要約 ローカル環境でのRAG構築において、メモリ消費量を抑えつつミリ秒単位の検索速度を実現する TurboQuantによる量子化技術とRust実装により、既存のPython製ライブラリを圧倒するスループットを誇る 自宅サーバーやエッジデバイスでLLMを動かしたい開発者には必須だが、マネージドなクラウドDBを求めている層には不要 📦 この記事に関連する商品(楽天メインで価格確認) ...

2026年6月8日 · 10 分 · 4766 文字 · Negi AI Lab
AI generated thumbnail

whichllm 自分のPCで動くかつ賢いローカルLLMを秒速で特定する

注意: 本記事はドキュメント・公開情報をもとにした評価記事です。コード例はシミュレーションです。 3行要約 ハードウェア構成を自動認識し、その環境で「実際に快適に動作する」最適なLLMを推薦するツール 単なるパラメータ数ではなく、最新のベンチマークデータとVRAM/RAMの空き容量を照合してランク付けする ローカルLLMを始めたいがモデル選びに迷っている人には必須、すでに特定モデルを使い込んでいる人には不要 📦 この記事に関連する商品(楽天メインで価格確認) ...

2026年6月8日 · 8 分 · 3868 文字 · Negi AI Lab
AI generated thumbnail

ローカルLLM環境の選び方:Ollamaを爆速で動かすためのGPU・Mac比較と失敗しないPC選び

3行要約 ローカルLLMを「仕事」で使うなら、VRAM 16GBが最低ライン、24GB以上が推奨。 NVIDIA環境ならRTX 4060 Ti 16GB、Macならメモリ32GB以上のM4世代がコスパ・性能ともに最適。 UIの豪華さより、ハードウェア性能を最大限引き出す「ミニマルな環境」を組むことが開発効率を分ける。 📦 この記事に関連する商品(楽天メインで価格確認) ...

2026年6月8日 · 9 分 · 4314 文字 · Negi AI Lab
AI generated thumbnail

ローカルLLM構築におすすめのPCスペック比較|RTXかMacか?VRAM不足で後悔しない選び方

3行要約 ローカルLLM環境の成否は「VRAM容量」で9割決まるため、速度より容量を優先して選ぶべき 予算20万円ならRTX 4060 Ti 16GBモデル一択、本気で開発するなら中古RTX 3090かMac Studio 64GB以上が最低ライン 「動く」と「仕事に使える」の間には大きな壁があり、推論速度5トークン/秒以下は実務ではストレスで使わなくなる 📦 この記事に関連する商品(楽天メインで価格確認) ...

2026年6月8日 · 10 分 · 4568 文字 · Negi AI Lab
AI generated thumbnail

Gemma 4 12Bを12GB VRAMで120 tok/s駆動させる方法

所要時間: 約40分 | 難易度: ★★★★☆ この記事で作るもの 12GB VRAMの一般向けGPU(RTX 3060等)で、最新モデルGemma 4 12Bを爆速(120 tok/s超)で動作させる推論環境 QAT(量子化を意識した学習)とMTP(複数トークン同時予測)を組み合わせたllama.cppのビルドと実行手順 PythonからAPI経由でこの爆速モデルを叩き、実用的なアプリに組み込むためのベースコード 📦 この記事に関連する商品(楽天メインで価格確認) ...

2026年6月7日 · 9 分 · 4312 文字 · Negi AI Lab