株式会社トドオナダは、LLMがカテゴリから想起する対象を記録する公開サイト「ディギコのチャピりログ」を公開しました。
ビューティー領域の84小カテゴリを対象に、GPTとClaudeの想起集合やRAG発火率を無料で閲覧できます。
モデル更新に合わせて再測定し、世代ごとの変化を記録します。
記事の概要
「ディギコのチャピりログ」では、「{カテゴリ}といえば?」という質問を各モデルに10回投げます。
カテゴリページでは、対象が何回、何位で現れたかを想起集合として示します。
想起集合の安定度は、「盤石」「強固」「中程度」「不安定」の4段階で表示します。
RAG発火率は、10回中にLLMが検索ツールを呼び出そうとした回数です。
検索ツールは実行せず、製品版のChatGPTなどにおける検索動作そのものは測定しません。
商品ページでは、想起された対象についてLLMが述べた説明文と参考商品を掲載します。
測定には、同社のLLM認知確認ツール「ディギディギ」を用い、APIが返した実バージョンをモデル世代ごとに保存します。
記事のポイント
- 84カテゴリを無料公開: ビューティー領域の84小カテゴリで、GPTとClaudeが想起する対象や順位を比較できます。
- 検索依存も測定: 10回の質問で検索ツールを呼び出そうとした回数を数え、カテゴリごとのRAG発火率を示します。
- 企業向け測定にも対応: 自社ブランドの想起集合への掲載や競合との想起シェアは、有料ツール「ディギディギ」で確認できます。
このニュースがもたらす影響
- 導入を検討する企業: 自社ブランドがLLMの回答候補に入るかを、競合との比較やモデル別の違いを含めて確認できるため、従来の検索順位とは別の認知指標として予算や施策の検討材料になりそうです。
- 美容業界の同業者: カテゴリごとの想起順位や安定度が公開されることで、ブランド発信の成果を検索流入だけでなくLLM上の想起という観点から見直し、説明文や商品情報の整備を進める可能性があります。
- AIマーケティング業界: モデル更新前後の想起変化や検索依存の差を追えるため、LLM向けのブランド評価では単発の回答確認ではなく、モデル世代と質問条件をそろえた継続測定が求められそうです。
このニュースの背景
LLMの回答は、同じカテゴリへの質問でも現れる対象や順位が一定とは限らず、ブランドがどの程度想起されるかを一度の確認だけで判断しにくい状況です。
同社は、同じ質問を複数回投げた結果から想起される対象の集合と安定度を捉える測定方法を採用しています。
また、モデルが記憶で答えるのか検索を試みるのかを分けて見るため、回答内容だけでなく検索ツールを呼び出そうとした回数も指標にしています。
モデル更新に合わせて実バージョンを保存する設計により、時間の経過で変わるLLM上のブランド認知を世代単位で比較できる形にしています。
関連するニュース
- 株式会社トドオナダがClaude Opusのブランド想起を比較し、世代更新と報道量の関係を調査しました。
- 株式会社トドオナダがLLMのブランド認知や誤情報を測る「ディギディギ」を単独サービスとして提供開始しました。
- 株式会社トドオナダが、LLM上のブランド想起強度を測定し、広報施策につなぐ機能を追加しました。
詳しい記事の内容はこちらから(引用元)
株式会社トドオナダのプレスリリース(2026年8月31日 13時13分)LLM が「思い浮かべるブランド」をモデル更新の…
https://prtimes.jp/main/html/rd/p/000000285.000054369.html