LLMO

AI が自社について間違ったことを答えるとき:直し方

AI が自社の価格や事業内容を間違えて答えることがあります。当方の計測でも、AI が社名を英字で書いた回は、自動の集計で別のサービスとして数えられていました。AI の誤り(ハルシネーション)の確かめ方と、直すべき場所の順番を整理します。

この記事の要点

  • AI の答えを企業が直接書き換える手段はありません。直すのは、AI が根拠にしている情報源です
  • まず、誤りが「検索した材料の誤り」なのか「学習した知識の古さ」なのか「AI の思い違い」なのかを分けます
  • 自社サイトの記載をそろえ、外部の掲載先に訂正を依頼し、社名の表記ゆれをなくす、の順で進めます

AI が間違ったことを答えるのは、なぜですか?

生成 AI は、材料をもとに文章を毎回組み立てています。材料が誤っていたり古かったりすれば、答えも誤ります。材料が正しくても、組み立てる途中で取り違えることがあります。OpenAI も、ChatGPT の検索結果や引用は不完全だったり、古かったり、誤っていたりする場合があると案内しています(OpenAI ヘルプ「ChatGPT でウェブを検索する」)。

誤りは、原因によって 3 つに分けられます。

種類何が起きているか見分け方
材料の誤り検索で見つけたページ自体に、誤りや古い情報が書かれている検索をする AI で、引用元を開くと同じ誤りが書かれている
知識の古さ学習した時点より後の変化(価格改定、新サービス、移転)を知らない検索をしない使い方で起き、以前は正しかった内容になっている
AI の思い違い材料に書かれていないことや、別の会社の情報を混ぜて答える引用元を開いても、その内容が書かれていない

社名の書き方でも、誤りは起きるのですか?

起きます。AI の答えの中で、同じ会社が別の名前で書かれることがあるからです。当方の計測では、社名の書き方のゆれがはっきり見えました。

見たもの結果
回答から自動で抜き出したサービス名の数138
同じサービスの表記ゆれ(英字とカタカナなど)をまとめたあと約 120
対象サービスの名前が英字で書かれ、別のサービスとして数えられていた回社名を含まない質問 225 回中 2 回

AI の中で「株式会社◯◯」「◯◯」「英字の◯◯」が別々のものとして扱われると、評判や実績が分散し、別の会社の情報と混ざる原因にもなります。詳しくは LLMO の競合分析:登録した競合の外に何がいるか に書きました。

誤りを見つけたら、どこから直せばいいですか?

順直す場所やること
1誤りの出どころを特定する検索をする AI で同じ質問を投げ、引用元を開いて、誤りが書かれているページを探す
2自社サイト会社概要、価格、サービス内容、所在地を 1 か所に正確に書き、更新日を示す。終了したサービスのページを放置しない
3外部の掲載先比較サイト、口コミサイト、業界団体の名簿、取引先のページなど、誤りが載っている掲載先に訂正を依頼する
4社名の表記をそろえる正式名称・サービス名・英字表記の関係を、自社サイトと外部の掲載先で統一する
5地図・店舗情報店舗や拠点がある場合は、Google ビジネスプロフィールの名称・住所・電話番号を最新にする
6AI のサービスに報告する答えの評価ボタンなどから誤りを報告する。ただし、それで答えが直る保証はない

Wikipedia に誤りがある場合も、自社や関係者が直接編集するのは Wikipedia の方針上、利益相反として問題になりえます。ノートページでの指摘など、定められた手続きに沿って対応してください。

学習した知識の古さは、次にモデルが更新されるまで直りません。「AI に正しいことを学習させる」ような手段はない点にも注意してください(「AI に学習させる SEO」が成立しない理由)。

主張根拠の強さ根拠
AI の答えには、誤りや古い情報が含まれうる◎ 実証各社の公式の案内
AI の答えの中で、同じ会社が別の名前で扱われることがある◎ 実証当方の実測(表記ゆれ)
根拠になっているページを直せば、検索をする AI の答えは変わりうる○ 有力当方の実測で、引用元と答えが連動していた。直した前後の比較データはまだない
企業が AI の答えを直接修正できる✕ 否定されつつあるそうした手段は提供されていない

根拠の強さは、◎ 実証(当方の実測、または複数の独立した調査が同じ結論)/○ 有力/△ 仮説/✕ 否定されつつある、の 4 段階で示しています。

※ 外部の公式ドキュメントの内容は、記載した時点のものです。

よくある質問

直したあと、どのくらいで AI の答えは変わりますか?

検索をする AI では、根拠になっていたページが直り、それが検索で読まれれば、比較的早く変わりうると考えられます。学習した知識で答える AI では、次のモデルの更新まで変わらないことがあります。いずれも決まった期間はありません。

誤りが見つかったかどうかは、どうやって継続的に確かめればいいですか?

「(自社)は何の会社?」「(自社)の料金は?」のような社名を含む質問を決めておき、月に 1 回、同じ条件で複数の AI に投げて、答えを原文のまま残してください。手順は 自社の評判を AI はどう答えるか にまとめました。

自社サイトで、AI のクローラを拒否していたら直りませんか?

検索をする AI では、自社サイトの正しい情報が読まれにくくなります。robots.txt などの設定を先に確かめてください(AI クローラと robots.txt:最初に確認すること)。

計測条件と免責

本ページに記載した数値は、明記した計測条件(エンジン・モデル・反復回数・実施日)のもとで観測された結果です。 生成 AI の回答は継続的に変動するため、同じ条件で再計測しても同一の結果になるとは限らず、将来の結果を保証するものではありません。 また本ページは、特定の施策によって出現率・順位が向上することを保証するものではありません。

法規制に関する記述は、公表されている運用基準にもとづく一般的な整理であり、法的助言ではありません。個別の判断は専門家にご確認ください。

本ページに登場する計測対象・競合は、特に断りのない限り社名を伏せています。特定の企業・サービスを推奨または批判する意図はありません。