AI generated thumbnail

Needle 使い方 入門|26Mの超軽量モデルで爆速ツール呼び出しを実現する方法

所要時間: 約20分 | 難易度: ★★☆☆☆ この記事で作るもの 26M(2600万)という驚異的な小ささのモデル「Needle」を使い、ユーザーの入力から「どのツールを、どの引数で使うべきか」を瞬時に判断するPythonスクリプトを作成します。 Gemini 1.5 Proのツール呼び出し能力を蒸留したこのモデルを、ローカル環境で爆速(1200 tok/s以上)で動かす体験を提供します。 ...

2026年5月13日 · 9 分 · 4094 文字 · Negi AI Lab