クロールされても引用されない:AIアシスタントが一部のサイトを無視する理由

「クロールされた」が「引用される」を意味しない理由

クローラーの訪問は、ボットがあなたのページの取得に成功したことを確認するだけだ——それは機械的な最初のステップであり、結果ではない。その訪問の後に何が起きるか——コンテンツが引用に値するほど具体的で、信頼でき、際立っているかどうか——は、AIシステムが後で下す別の判断であり、しばしば特定の訪問とはまったく結びついていない。

ある話題を調査するために何十もの情報源を読むが、直接引用するのはそのうちの二つか三つだけというジャーナリストを想像してみてほしい。引用されるには読まれることが必要だ。しかしそれだけではまったく十分ではない——AIクローラーの挙動に関するCloudflare自身の測定は、特定のサイトの特定の結果と比べて、一般にどれほど多くのクロールが行われているかを示している。

最も一般的な理由:何も具体的なことを言っていないコンテンツ

二人の歯科医の「私たちについて」のページを想像してみよう。一方は「親しみやすいチームが快適な環境で質の高い歯科医療を提供します」と書いている。もう一方は「当院は2009年以来リバーサイド地区の家族を診療し、当日対応の緊急予約を専門とし、主任歯科医は小児鎮静の高度なトレーニングを修了しています」と書いている。「当日対応の緊急診療を行う近くの歯科医はどこか」という質問に答えるAIアシスタントには、二つ目のページから使える具体的な材料があるが、一つ目のページからは何も使えるものがない——たとえ両方のページがまったく同じようにクロールされていたとしてもだ。

ありきたりな表現は、正確には間違っているわけではない——単に引用できないだけだ。回答を生成するアシスタントは、特定の事業者に帰属させられる具体的な主張を必要としており、ほとんどどの競合についても同じように当てはまる段落は必要としていない。

二番目の理由:信頼シグナルの欠如または弱さ

コンテンツをランキングに値するものにする要素についてのGoogle自身のガイダンスは、「経験、専門性、権威性、信頼性」を示すコンテンツを優先することを説明している——一般にE-E-A-Tと略される。そのガイダンスはGoogle検索向けに特化して書かれたものだが、その根底にある判断——この情報源は信頼するに足るほど信用できるように見えるか——は、人間であれ自動化されたものであれ、誰かのために情報を要約するどんなシステムでも適用するであろう、合理的で日常的な基準だ。

著者名も、明確な事業者としての身元も、検証可能な具体的情報もないページは、誰が書いたか、その人にどんな資格があるか、事業が実際にどこに所在するかを明確に述べているページよりも信頼性が低く見える。当社のエンティティ一貫性に関するガイドでは、この身元に関する側面を詳しく取り上げている——自社サイト全体で一貫性のない説明をされている事業者は、どんなシステムにとっても自信を持って信頼しにくい。

三番目の理由:他に誰もそう言っていない

自社ウェブサイトだけに登場する主張は、レビュー、地元のディレクトリ掲載、他人のブログでの言及など、他の場所で独立に繰り返されている同じ主張よりも重みが軽い。これは自己宣伝に対する何か陰謀のようなものではない——事業者自身についての主張は、入手可能な情報源の中で最も独立した検証がされていないものであるため、情報を要約するどんなシステムでも適用するであろう合理的な慎重さなのだ。また、PerplexityBot自身が文書化している目的が具体的に「ウェブサイトを表示しリンクすること」であることも覚えておく価値がある——情報源の引用を中心に構築されたシステムには、複数の場所を指し示せる主張を好む十分な理由がある。

だからこそ、レビューや外部での言及は、その明らかなマーケティング価値を超えて、ここで本当に重要になる——それらは、AIシステムが自社のホームページよりも独立性が高いと合理的にみなせる裏付けなのだ。

今日実行できる実践的な監査

自社の主要ページを開き、それぞれについて三つの正直な質問をしてみよう。

• 競合のページも同じ文を言えるだろうか?もしそうなら、その文章はあなたの特定の事業についての引用可能な事実としては一般的すぎる。
• このページだけを読んだ見知らぬ人はそれを信頼するだろうか?実名の人物、具体的な所在地、検証可能な詳細を探してみよう——単なる親しみやすい口調だけではなく。
• インターネット上の他の何かがこれを裏付けているか?レビュー、ディレクトリ掲載、他の場所での言及。ある主張が登場する唯一の場所が自社サイトだけなら、それはその主張の中で最も弱いバージョンだ。

FAQ