CitadexDocs

エージェント対応度:AI クローラー、対応度スコア、エージェントタスクのシミュレーション

AI クローラーの用途別(検索 / ユーザー起点 / 学習)の許可状況と判定の意味、エージェント対応度スコア、無料の公開チェックページと AI クローラーチェック、AI トラフィック →「エージェント」タブの週次監視とタスクのシミュレーションを説明します。

Visibility6 min read

3 種類の AI クローラー

AI 企業がサイトに送るクローラーには 3 つの用途があり、それぞれ扱い方が異なります。AI トラフィック →「クローラーとページ」の「AI クローラー」の表で、「用途」の列に各クローラーの種類が表示されます。

用途内容おすすめ
検索AI 検索のインデックス。AI の回答があなたを見つけて引用できるかを左右します許可
ユーザー起点ユーザーが AI にあなたのページを開かせたとき許可
学習今後のモデルの学習に使われますご判断ください

クローラーログを接続していると、表にはクローラーごとに 1 行で、直近 N 日の取得回数、よく取得されるページ、状態が 1 つ表示されます。

  • robots.txt で禁止:robots.txt がこのクローラーの取得を許可していません。
  • 模擬アクセスがブロックされました:このクローラーの User-Agent でトップページにアクセスしたところ、CDN やファイアウォールにブロックされました。リクエストは Citadex のサーバーから送るため、公式 IP だけを許可している場合のブロックは想定どおりです。「今すぐ確認」で模擬アクセスをやり直せます。
  • 許可(モデル学習用):学習用クローラーです。許可するかどうかはご判断ください。AI 検索での引用には影響しません。
  • 取得可能:妨げになるものは見つかっていません。

状態の横の「検証済み N 回」は IP の確認を通過した実際のアクセス、「なりすまし N 件を除外」は AI クローラーを名乗っているが IP が公式でないリクエストで、どの数値にも含めません。検索用・ユーザー起点クローラーが禁止またはブロックされていると、AI はページを取得できず、引用もできません。

robots.txt が AI の検索用・ユーザー起点クローラーを禁止しているときは、同じタブの「要修正」に robots.txt に追加するルールが表示されます。「行をコピー」でコピーできます。

AI トラフィック → クローラーとページ

AI トラフィック → クローラーとページ

エージェント対応度スコア

AI エージェント(ユーザーの代わりに情報を探し、比較し、購入する AI)がサイトを見つけ、読み、操作し、購入まで完了できるかを 1〜100 点で示します。グループは「発見できる」「読める」「操作できる」「購入できる」の 4 つです。チェック項目は、robots.txt が AI の検索・ユーザー起点クローラーを許可しているか、サイトマップ、llms.txt、JavaScript なしで本文が読めるか、構造化データ、ページ構造タグ、フォーム入力欄のラベル、ボタン名、ログインの要否、商品ページの Product 構造化データ・価格・在庫・購入ボタンです。ストアでないサイトでは、商品関連の項目は「対象外」になります。llms.txt は任意項目です。Google は使用しないと明言しており、他の AI エンジンも読み取りを公表していないため、なくても問題として扱いません。修正リストや変化アラートにも含めません。

無料ツール:公開チェックページと AI クローラーチェック

  • エージェント対応度チェック(ログイン不要):サイトを入力して「確認」を押します。未ログインでは総合スコア、4 グループのスコア、「主な問題」が表示されます。「無料登録」してログインすると、全項目と各項目の修正方法が表示され、「修正リストをコピー」「AI アシスタントに直し方を聞く」が使えます。
  • AIクローラー可否チェック:サイドバーの「ツール」にあり、robots.txt がどの AI クローラーを許可しているかを用途別に確認できます。用途ごとに「許可」「一部ブロック」「ブロック」「robots.txt を読み取れません」のいずれかを表示し、検索またはユーザー起点がブロック・一部ブロックの場合は赤く表示されます。

エージェント対応度チェックの結果

エージェント対応度チェックの結果

エージェントタブ:週次監視(有料プラン)

AI トラフィック →「エージェント」タブは有料プランで利用できます。

「エージェント対応度」カードは毎週月曜にプロジェクトのサイトを自動チェックし、総合スコア(括弧内は前回)、4 グループのスコア、推移グラフを表示します。その下に前回からの「新しい問題」と「修正済み」が並び、新しい問題には修正方法が付きます。検索・ユーザー起点の AI クローラーの訪問でエラーが多い場合もここに表示されます。スコアが 10 点以上下がったとき、またはいずれかの項目が不合格になったときは、プロジェクトのアラートが届きます。すぐに確認したいときは「今すぐチェック」(無料)。「チェックリスト全体(N 項目)」でこのページのまま全項目が開き、問題のある項目が先頭に、それぞれ修正方法付きで並びます(「リストを閉じる」で閉じます)。

エージェントタスクのシミュレーション

「エージェントタスクのシミュレーション」では、読み取り専用の AI エージェントが実際にサイトでタスクを試します。

できること・できないこと:サイト内のページを開いて読むことだけで、1 タスクあたり最大 8 ページです。JavaScript の実行、ログイン、フォーム送信、購入や予約は行いません。

標準タスクはサイトの種類に応じて 6 つです。

  • ストア:価格を見つける、特定の商品ページを見つける、在庫を確認する、返金ポリシーを見つける、{主要市場の国}への配送を確認する、連絡先を見つける
  • サービス:価格を見つける、{主要市場の国}に対応しているか確認する、問い合わせフォームと必須項目を見つける、デモ予約の入口を見つける、返金ポリシーを見つける、連絡先を見つける

「タスクを編集」でタスクを削除したり、独自のタスク(例:エンタープライズプランの価格を見つける)を入力して「追加」したりできます。最大 10 個で、最後に「保存」を押します。

結果の読み方:1 行に 1 タスクです。

  • 「結果」:「完了」または「失敗」。
  • 「つまずいた所」:完了時は見つけた答え、失敗時は「ステップ N:…」としてつまずいたステップと妨げになった要素。
  • 「所要」:ステップ数と秒数。
  • 「経過」:開いて、開いたページと各ステップで見た内容を確認できます。

実行方法:週 1 回自動で実行され、クレジットは消費しません。すぐに実行するには「実行」を押します。今回の実行で使うクレジット数が先に表示され、「実行する」を押してから開始します。クレジットが足りない場合は「クレジットが足りません」と表示されます。

AI トラフィック → エージェント

AI トラフィック → エージェント

よくある質問

学習クローラーは許可すべきですか? 学習クローラーは AI 検索で引用されるかどうかには影響しないため、ご判断ください。検索・ユーザー起点のクローラーは許可をおすすめします。

エージェントタブに「プロジェクトのサイトを先に設定してください」と出ます。 プロジェクト設定でサイトの URL を入力してください。チェックとタスクにはサイトが必要です。

タスクが失敗しました。何を直せばよいですか? 「つまずいた所」と「経過」を確認してください。よくある原因は、価格や在庫が JavaScript でしか読み込まれない、情報がログインの必要なページにある、などです。対応度チェックの修正方法に沿って直すと、次回の週次実行で自動的に再確認されます。

無料で使えるものはありますか? 公開チェックページと AI クローラーチェックは無料です。エージェントタブの週次監視とタスクのシミュレーションは有料プランが必要です。

Was this article helpful?