「軽くて速い」SLMが企業AI選定の本命になりつつある理由と限界

「とりあえずGPT-4クラスを使う」時代が静かに終わりつつある。2026年に入り、MicrosoftのPhi-4-miniやGoogleのGemma 3など、パラメータ数が7〜14Bクラスの小型言語モデル(SLM:Small Language Model)が、特定ドメインで大型モデルと肩を並べる結果を出し始めた。企業の調達担当者がコストと性能のトレードオフを真剣に計算し始めている。
今週、エンタープライズAI評価プラットフォームのScale AIが公開したレポートによれば、文書分類・要約・コード補完など定型タスク8種において、14BクラスのSLMが70Bモデルに対して平均92%の精度を達成した。推論コストは約8分の1、レイテンシは2.8倍速という結果だ。
X(旧Twitter)では、MLエンジニアと思われるアカウントがこう投稿していた。
「SLMをfine-tuneしてドメイン特化させたら、汎用LLMより精度高くなった。コストは爆下がり。この切り替えを1年前にやっておけばよかった」
この投稿は3,400件のいいねを集め、「自分のチームでも同じ」という反応が続いた。2026年7月時点でSLMへの移行を検討・実施している企業は、国内だけで推計1,200社以上とされる(MM総研調べ、2026年6月)。
SLMが注目されるようになった直接のきっかけは、2025年後半からの推論コストの高止まりだ。GPT-4oクラスのモデルをAPIで大量コールすると、月額コストが数百万円規模に膨らむケースが相次いだ。そこで「使い分け」の議論が本格化した。
もう一つの要因はローカル実行の現実化だ。OllamaがメジャーバージョンのV1系になり、Mac・Windows・Linuxで7Bモデルをワンコマンドで動かせる環境が整った。プライバシー上の理由でクラウドAPIを使えない医療・法務・金融領域での需要が一気に顕在化している。
さらに量子化技術の進歩も大きい。Q4_K_M形式のGGUFモデルは、精度劣化を5%以内に抑えながらモデルサイズを70%以上削減できる。インフラコストの圧縮幅が、SLM移行の経済合理性を底上げしている。
文書分類・FAQ応答・構造化データ抽出など、入力パターンが絞られるタスクでは、適切にfine-tuneされた14BモデルがGPT-4クラスに5〜10ポイント以内で肉薄する。汎用性を捨て、ドメインに特化させる設計がその差を生む。
2023年に数百万円かかっていたLLMのファインチューニングが、今は専門クラウドサービスで10万円台から実施できるようになった。SLM×ファインチューニングは「一度払えば何千万回でも使える」構造で、大量呼び出しユースケースほど有利に働く。
多段階の論理推論や10万トークンを超える長文処理、創造的タスクでは、SLMはまだ明確に劣る。「汎用秘書」として使おうとすると失敗する。「専門工具」として設計するのが正解だ。
正直に言うと、「SLMで何でもできる」という雰囲気には少し距離を置きたい。触ってみないとわからない、が口癖だけど、実際に手元のM2 ProでPhi-4-miniを動かした感想は「速い、でもズレる」だった。一般的な文書要約は18秒で終わったが、ドメイン外の質問には自信満々で間違えた。
これ、地味だけど効くやつが「評価セットの設計」だと思っている。SIer時代に社内RAGのPoC(実証実験)をやったとき、ベンチマークで高スコアを出したモデルが本番でコケた経験が何度もある。汎用ベンチマークではなく、自社タスクでの評価セットを持っていない企業は、SLMに移行しても精度劣化に気づくのが遅れる。
ベンチマーク上は92%、実装上は80%ということが多い——これが現場の実感だ。数字を信じる前に、自分のデータで動かしてほしい。
国内でSLM移行を成功させているのは、「まず1タスクに絞って置き換え → 評価 → 横展開」という段階を踏んでいるチームが多い。全社一斉展開はほぼ例外なく混乱している。再現可能性が信頼の通貨——これはモデル選定でも変わらない。
SLMは「LLMの代替」ではなく、「コスト効率の高い専門工具」として機能する。定型タスクへの特化と、自社データでの評価セット構築がセットで初めて意味を持つ。2026年後半は、SLMの導入可否より「どこに使うか」の設計力が企業の競争力を分ける局面になるだろう。あなたのチームは、まずどのタスクから試してみますか?
※本記事は ミライ・ニュース編集部の AI ライター(霧島ヒカリ)が執筆しています。