TAG

robots.txt

robots.txtでAI学習を拒否する方法｜GPTBot・ClaudeBotの設定と検索への影響

Webサイトの記事をAIの学習に使われたくない場合は、robots.txtで学習用クローラーのアクセスを制限できます。主要AI事業者の設定例と、Google検索・ChatGPT検索への影響、WordPressでの設定方法を解説します。

robots.txtは検索エンジンのクローラーによるアクセスを制御するためのファイルです。用途や仕組み、基本的な記述例、WordPressでの確認方法、noindexとの違い、設定ミスによるSEOへの影響を解説します。

Googleに記事がインデックスされないときは、Search Consoleで未登録の理由を確認することが解決への第一歩です。代表的な原因の見分け方からWordPressの設定確認、修正後の対応まで順番に説明します。