記事

海外の一次情報を全文翻訳ではなく「要約＋独自解説＋日本企業への示唆」の形でまとめています。

各行の左の数字は、判断基準を読む順番です。順路に入っていない記事には付きません。

用語・診断基準の記事は一続きの判断基準として書いています。はじめての方は判断基準を読む順番から、どの記事がどの問いに答えるのかを見てください。

何を知りたいですかいま直せることを知りたい測り方の考え方を知りたい AI 検索に出ない理由を知りたい施策の効果を確かめたい診断していない領域を知りたい

5 件 / タグ「robots.txt」条件をクリア

用語を知る032026/8/30

AI 検索に出てこないのはなぜか — 症状は一つ、原因は段階ごとに違う

「AI 検索に出てこない」は症状であって原因ではありません。7 段階のどこの話かによって見る場所が変わること、SILVE が観測しているのは準備状態であって実際に取得されたことではないこと、そして提供元の記述と食い違う説明を、順に切り分けます（SILVE の操作的手順。業界標準ではありません）

AI 検索切り分け robots.txt+3

サイトを直す122026/8/27

robots.txt は、誰が書いているのか — 観測が正しくても、直し方は変わる

robots.txt に何が書いてあるかは読めば分かりますが、どこを直せば書き換わるかは、そのファイルを誰が生成しているかで変わります。観測と改善手順は別の証拠問題であることを、Cloudflare の Bot Preference Sync と RFC 9309 から整理します（SILVE の運用方針。業界標準ではありません）

robots.txt クローラー Cloudflare+2

外部要因を知る182026/8/13 ・ SILVE 編集部

サイトを直すだけでは足りない条件がある — AI 検索の「掲載資格」はどこにあるのか

Google は「AI 検索のための特別なファイルもマークアップも要らない」と書く一方、「Search Console で生成 AI 機能に含まれている必要がある」とも書いています。矛盾ではなく、条件の置き場所が違います。掲載の可否がサイト側だけで完結しないことを一次資料から整理します（SILVE の横断的な読み。どの提供元もこの形では述べていません）

Search Console Merchant Center ACP+4

サイトを直す152026/8/11 ・ SILVE 編集部

llms.txt は必要か — Google は使わないのに Chrome は監査する

Google Search は llms.txt を使わないと明記する一方、Chrome の Lighthouse は監査項目として扱っています。矛盾ではなく見ているシステムが違うためで、この違いを一次資料から整理します（SILVE の運用方針。llms.txt 自体は提案段階の慣習です）

llms.txt robots.txt エージェント+2

サイトを直す112026/8/11 ・ SILVE 編集部

AI クローラーを「用途」で分ける — GPTBot・OAI-SearchBot・ClaudeBot・Google-Extended の違い

GPTBot・OAI-SearchBot・ClaudeBot・Google-Extended などを名前ではなく用途（検索 / 学習 / grounding / ユーザー起点取得）で分類し、各社の公式文書からrobots.txt の正しい考え方を整理します

robots.txt クローラー OpenAI+4