#Google-Extended

AI クローラー一覧と robots.txt の書き方【2026年10月】— 学習用・検索用・利用者操作の3区分で決める BtoB の設定

OpenAI・Anthropic・Google・Apple・Meta の公式ドキュメントで AI クローラーを「学習用・検索用・利用者操作」の3区分に整理し、BtoB サイトが robots.txt でどこまで許可するかの判断表と、そのまま貼れる設定例を載せます。各社の仕様は 2026年10月時点。