LLM(大規模言語モデル)

AI | IT用語集

この用語をシェア

概要

LLM(Large Language Model)は、大量のテキストデータで訓練された大規模な機械学習モデルで、人間のようなテキスト生成、理解、そして対話が可能です。Transformerアーキテクチャを基盤としており、数千億以上のパラメータを持つことが特徴です。

2017年にGoogleの研究者らが発表した論文「Attention Is All You Need」でTransformerが提案され、2018年のBERT、2020年のGPT-3を経て、2022年11月にOpenAIがChatGPTを公開したことを機に一般にも急速に普及した。従来のルールベース翻訳や統計的な自然言語処理(NLP)と異なり、大量のコーパスと計算資源を投入して「文脈の続きに来る単語を予測する」というシンプルな学習目標だけで、文法・雑学的知識・ある程度の論理的推論・多言語対応といった幅広い能力を獲得できる点がLLMの本質的な特徴である。日本語では「大規模言語モデル」と訳されるが、ビジネス文書や技術記事では英語の略称である「LLM」がそのまま使われることが多い。国内でも国立情報学研究所等が中心となる研究コンソーシアムLLM-jp、rinna、ELYZA、Preferred NetworksのPLaMoなど、日本語の語彙・文化的文脈への対応を重視した独自LLMの開発が進んでおり、海外発の汎用モデルと国産モデルを用途に応じて使い分ける動きも出てきている。

仕組み・詳細解説

LLMは、インターネット上の巨大なテキストコーパスを使用して事前学習(Pre-training)されます。この過程でモデルは言語の構造、意味、文脈、一般的な知識を統計的パターンとして獲得します。主要なLLMには、OpenAIのGPTシリーズ、AnthropicのClaude、GoogleのGemini、MetaのLlamaなどがあり、要約・翻訳・コード生成・論理的推論など幅広いタスクをこなせます。以下では、その内部でどのような処理が行われているかを4つの観点から整理する。

Transformerと自己注意機構(Self-Attention)

LLMの中核をなすのがTransformerというニューラルネットワーク構造である。従来のRNN(再帰型ニューラルネットワーク)やLSTMは文章を先頭から順番に処理するため、長文になるほど文脈情報が薄れやすいという弱点があった。これに対しTransformerは自己注意機構(Self-Attention)により、文中のすべてのトークン同士の関連度を並列に計算する。これにより「それ」が文中のどの名詞を指すかといった長距離の依存関係も効率的に学習でき、かつGPUによる並列計算とも相性が良いため、モデルの大規模化が現実的になった。

トークン化と次トークン予測

LLMは入力文をそのまま扱うのではなく、まずトークナイザーによって単語やサブワード単位の「トークン」に分割する。学習時には大量の文章の一部を隠し、直前までの文脈から次に来るトークンを予測するという単純なタスク(自己回帰的言語モデリング)を繰り返すことで、統計的に自然な文章を生成する能力を獲得する。推論(生成)時も同様に、直前までの文脈から次の1トークンを確率的に選び、それを入力に追加してまた次のトークンを予測する、という処理を1トークンずつ繰り返してテキストを生成している。API利用時の課金がトークン数ベースになっているのはこのためである。

スケーリング則とパラメータ規模

OpenAIをはじめとする研究により、モデルのパラメータ数・学習データ量・計算量を増やすほど性能が対数的に向上するという「スケーリング則(Scaling Laws)」の傾向が示され、2020年前後から数百億〜数千億パラメータ規模のモデル開発が主流になった。一方で2024年以降は、単純な規模拡大だけでなく学習データの質の向上や、必要な部分のパラメータのみを使い分けるMoE(Mixture of Experts)のようなアーキテクチャの効率化によっても性能向上が図られており、パラメータ数の大小だけでモデルの優劣を判断するのは適切でなくなりつつある。

ファインチューニングとRLHF・指示追従

事前学習を終えただけのLLMは、単に「もっともらしい文章の続き」を生成するだけで、人間の指示に素直に従うとは限らない。そこで指示と模範回答のペアを使って追加学習する教師ありファインチューニング(SFT)や、人間の評価をもとに報酬モデルを作り強化学習で応答の質を調整するRLHF(Reinforcement Learning from Human Feedback)、AnthropicのConstitutional AIのようにAI自身に原則を参照させて自己修正させる手法などを経て、実際に対話アシスタントとして使えるモデルに仕上げられる。企業がLLMを業務利用する際にも、社内文書に基づく追加学習(ファインチューニング)や、後述するRAGとの組み合わせによって、汎用モデルを自社ドメインの語彙・文脈に適応させることが実務上の定石となっている。

コンテキストウィンドウという制約

LLMには「コンテキストウィンドウ」と呼ばれる、一度の入出力でモデルが参照できるトークン数の上限が存在する。会話が長くなったり、長大なドキュメントを丸ごと読み込ませたりすると、この上限を超えた古い部分は参照されなくなる。近年のモデルはこのコンテキストウィンドウを拡大する方向で改善が進んでいるが、それでもモデルは会話終了後に内容を「記憶」し続けているわけではなく、次回の対話ではあらためて必要な文脈を与える必要がある。この特性を理解せずに「前回話した内容を覚えているはず」と誤解して運用すると、期待した挙動が得られない原因になりやすい。

具体例・ユースケース

LLMは単体のチャット画面としてだけでなく、API経由で既存の業務システムやアプリケーションに組み込む形での活用が広がっている。代表的な活用シーンは以下の通り。

  • コンテンツ作成: ブログ記事の下書き、マーケティング文、プレゼン資料の構成案作成
  • コード生成: プログラムコードの作成、デバッグ、リファクタリング、テストコードの自動生成
  • 翻訳・ローカライゼーション: 多言語間の翻訳、文体調整を伴うローカライゼーション
  • 要約: 長文書、論文、会議の議事録・録音の要約作成
  • カスタマーサポート: 社外向けチャットボット、社内問い合わせ対応(社内文書をRAGで参照させるケースが多い)
  • 契約書・規約のレビュー補助: 条文の要点抽出やリスク箇所の指摘(最終判断は人間の専門家が行う前提)
  • データ分析支援: 自然文からのSQL生成、集計結果の解釈・レポート化
  • 教育・学習: 個別指導、問題作成、学習内容の解説
  • クリエイティブワーク: アイデア発想、ストーリー作成、キャッチコピー案の作成

代表的なLLM・サービスの例

モデルのバージョンやラインナップは頻繁に更新されるため、以下は本稿執筆時点(2026年)における代表例であり、詳細は各社の公式情報を参照されたい。

モデル・サービス 開発元 特徴
GPTシリーズ / ChatGPTOpenAIマルチモーダル対応、一般消費者向け普及率が高い
Claude(Opus / Sonnet / Haiku)Anthropic長文コンテキストとConstitutional AIによる安全性重視の設計
GeminiGoogleGoogle検索・Workspace等の自社サービスとの統合
Llama シリーズMetaオープンウェイトで自社サーバーへのホスティングが可能
DeepSeek シリーズDeepSeek低コスト運用とオープンウェイト公開を志向する中国発モデル
GrokxAIX(旧Twitter)のリアルタイム情報との統合を志向

導入シナリオの一例:社内問い合わせ対応

たとえば社内のバックオフィス部門向けチャットボットを構築する場合、一般的には次のような手順で検討が進む。まず社内規程・マニュアル・過去のQ&Aといった文書をベクトルデータベースに登録し、質問が来るたびに関連文書を検索してLLMに読み込ませるRAG構成を採用する。次に、社員が実際に使いそうな質問例を使って回答の精度を評価し、誤りが多い領域についてはプロンプトの調整や参照文書の追加を行う。最後に、個人情報や人事評価など機微な情報を扱う質問には自動回答をさせず、担当部署に転送するといったガードレールを設ける。このように、LLM単体を導入するのではなく、検索・評価・例外処理までを含めた一連の仕組みとして設計することが実務上の成功パターンになっている。

メリット・デメリット(注意点)

メリット デメリット・注意点
一つのモデルで要約・翻訳・コード生成など多様なタスクに対応できる汎用性ハルシネーション(事実と異なる内容をもっともらしく生成する現象)が発生しうる
API呼び出しだけで高度な自然言語処理を実装でき、開発工数を削減できる学習データの偏りや、学習データのカットオフ日以降の情報を知らない
モデルのバージョンアップだけでアプリ側の改修なしに性能が向上することが多い入力内容の取り扱い次第では機密情報の漏洩リスクがある(利用規約の確認が必須)
プロンプトの工夫だけで追加学習なしに用途を切り替えられる柔軟性トークン数に応じた従量課金のため、利用量次第でコストが増大しやすい
対話形式のため非エンジニアでも直感的に使える生成物の著作権・権利関係の扱いがサービスや国によって異なる場合がある

総じて言えば、LLMは「何でも一定水準でこなせる汎用性」と引き換えに、「常に完璧な正確性を保証するものではない」という性質を持つツールである。定型的な事務作業の自動化には向く一方、法務・医療・会計のように誤りが重大な結果を招く領域では、LLMの出力を最終判断に使わず、あくまで下書きや一次チェックの補助として位置づける運用が現実的である。

混同されやすい用語・類似技術との違い

用語 LLMとの違い
生成AI(Generative AI)LLMはテキストに特化した生成AIの一種。画像生成や動画生成のモデルなども生成AIに含まれるが、それらは言語モデルではない。
NLP(自然言語処理)NLPは言語をコンピュータで処理する技術分野全体を指す学問領域であり、LLMはその中の一手法・実装形態。ルールベースの形態素解析や従来型の統計的機械翻訳もNLPに含まれる。
SLM(Small Language Model)パラメータ規模を数億〜数十億程度に抑え、スマートフォンやオンプレミス環境での動作を意識した軽量モデル。応答品質よりも低コスト・低遅延・オンデバイス実行を優先する用途で使われる。
チャットボットLLMは対話に限らずテキスト生成全般を担うモデルそのものであり、チャットボットはLLMを対話インターフェースとして実装したアプリケーションの一つに過ぎない。
基盤モデル(Foundation Model)大量データで事前学習し、様々な下流タスクに転用できる大規模モデルを指す包括的な呼称。LLMは基盤モデルのうちテキスト(言語)を扱うものを指す言葉であり、画像や音声を扱う基盤モデルも存在する。
RAG(Retrieval-Augmented Generation)LLM単体は学習時点までの知識しか持たないため、外部の文書検索結果をプロンプトに追加してから回答させる仕組みがRAG。LLMを拡張する周辺技術であり、LLMそのものではない。
AIエージェントLLMの推論能力を使って外部ツール呼び出しや複数ステップの計画・実行を自律的に行う仕組み。LLMが「頭脳」、AIエージェントはそれを使った「自律実行の枠組み」という関係にある。

なお「AI(人工知能)」という言葉自体はLLMよりはるかに広い概念で、機械学習・深層学習・ルールベースの専門家システムなども含む。日常会話では「AI」「生成AI」「LLM」がほぼ同じ意味で使われがちだが、要件定義や技術選定の場ではこれらの違いを踏まえて言葉を使い分けると、関係者間の認識齟齬を防ぎやすい。

実務導入のポイント

LLMは試しにチャット画面で使う分にはハードルが低いが、業務システムに組み込んで継続的に運用するとなると、精度・コスト・セキュリティの三つの軸で事前検討が必要になる。実務で特に確認しておきたい観点は以下の通り。

  • コストの事前試算: トークン課金のため、想定リクエスト数・平均トークン数から月額コストを事前に見積もっておく
  • プロンプト設計と評価: 同じモデルでもプロンプトの書き方で出力品質が大きく変わるため、プロンプトエンジニアリングと評価用データセットでの検証を行う
  • 機密情報の取り扱い確認: 契約プランによって入力データが再学習に利用されるかどうかが異なるため、利用規約・データ処理ポリシーを事前に確認する
  • ハルシネーション対策: 重要な業務では出力をそのまま採用せず、RAGによる根拠提示や人間によるレビュー工程を組み込む
  • ベンダーロックインの回避: API呼び出し部分を抽象化しておき、将来的なモデル・提供元の乗り換えを容易にしておく

2025〜2026年の最新動向

推論特化モデル(Reasoning Model)の広がり

回答前に内部的に思考過程(Chain of Thought)を展開してから最終回答を出す「推論特化モデル」が各社から提供されるようになった。複雑な数学・コーディング・多段階の論理問題において、通常のモデルより高い精度が得られるとされる一方、思考過程を展開する分だけ応答に時間とコストがかかる傾向があるため、単純な質問には従来型モデルを使い分けるといった使い分けが実務では定石になりつつある。

マルチモーダル化の進展

テキストだけでなく画像・音声・動画を単一のモデルで扱う「マルチモーダルLLM」が標準的な提供形態になりつつある。画像を読み込んで内容を説明させたり、音声を直接入力・出力に使ったりする用途が広がっている。

AIエージェント化とMCP(Model Context Protocol)

LLMを単発の質疑応答で終わらせず、外部ツールやAPIを呼び出しながら複数ステップのタスクを自律的にこなす「AIエージェント」としての活用が急速に広がっている。Anthropicが提唱したMCP(Model Context Protocol)のように、LLMと外部データソース・ツールとの接続方法を標準化する動きも進んでおり、社内システムや業務ツールとLLMを安全かつ効率的に連携させる基盤づくりが企業の関心事になっている。

オープンウェイトモデルの台頭と利用コストの低下

Llama、DeepSeek、Qwenなどオープンウェイトで公開されるモデルの性能向上により、自社サーバーやプライベートクラウド上でLLMを運用する選択肢も現実的になってきている。各社のAPI提供競争も相まって、同水準の性能を得るための利用コストは継続的に低下する傾向にある。

これらの潮流に共通するのは、LLMが「賢い文章生成器」から「業務プロセスの一部を任せられる実行主体」へと役割を広げつつあるという点である。導入を検討する企業にとっては、どのモデルが最も高性能かという比較だけでなく、自社の業務フローのどこにLLMを組み込むか、どこまでを人間の確認工程として残すかという設計判断の重要性が増している。

この用語についてもっと詳しく

LLM(大規模言語モデル)に関するご質問や、システム導入のご相談など、お気軽にお問い合わせください。

よくある質問(FAQ)

Q. LLMとは何の略ですか

Large Language Model(大規模言語モデル)の略で、GPT-4、Claude、Gemini、Llama等が代表的です。

Q. LLMはどう動作しますか

Transformerベースで次のトークンを予測する形でテキストを生成します。大量テキストから言語パターン・知識・推論能力を学習しています。

Q. LLMと生成AIは同じものですか

厳密には異なります。生成AIはテキスト・画像・音声・動画などを新規に生成するAI技術全般を指す広い概念で、LLMはそのうちテキスト(言語)に特化した種類の一つです。画像生成モデルなどはLLMではありませんが生成AIには含まれます。

Q. LLMは必ず正しい答えを返しますか

いいえ。LLMは統計的にもっともらしい文章を生成する仕組みであるため、事実と異なる内容を自信ありげに生成する「ハルシネーション」が起こり得ます。重要な業務判断に使う場合は、RAGによる根拠提示や人間によるファクトチェック工程を組み込むことが推奨されます。

Q. LLMとRAGはどう違いますか、併用できますか

LLMは言語生成を担うモデル本体、RAGはLLMの回答前に外部文書を検索して根拠情報をプロンプトに追加する仕組みです。両者は対立するものではなく、社内文書に基づく回答精度を高めるために併用されるのが一般的です。

Q. 企業がLLMを導入する際にまず何を確認すべきですか

入力データの取り扱い(再学習に利用されるか)、想定利用量に対するコスト試算、出力の正確性を担保する運用プロセス(レビュー体制やRAGの要否)の3点を事前に確認することが実務上の出発点になります。

Q. 2025〜2026年の最新動向は

回答前に思考過程を展開する推論特化モデルの普及、テキスト・画像・音声を単一モデルで扱うマルチモーダル化、外部ツールを自律的に呼び出すAIエージェント化とMCP(Model Context Protocol)による接続標準化、オープンウェイトモデルの性能向上によるコスト低下が主要なトレンドです。

Q. LLMの利用料金はどのように決まりますか

多くのAPIは入力・出力それぞれのトークン数に応じた従量課金です。同じ質問でも、プロンプトが長い、モデルが思考過程を長く展開する、出力が長文になるといった場合はトークン数が増え、コストも増加します。用途に応じて高性能モデルと軽量モデルを使い分けることで、コストを最適化するのが実務上の工夫です。

Q. 個人がLLMを学ぶにはどこから始めればよいですか

まずはChatGPTやClaude、GeminiといったチャットサービスをWebブラウザから実際に使い、要約・翻訳・アイデア出しなど身近なタスクで挙動に慣れることが出発点になります。次にAPIを使ったプログラム連携やプロンプトエンジニアリングの基礎を学ぶと、業務アプリケーションへの組み込みまで視野が広がります。Transformerの仕組みなど内部構造まで理解したい場合は、原論文「Attention Is All You Need」や公開されている技術解説記事が参考になります。

関連用語

関連Webサイト

カテゴリ

AI IT用語集