サービスによっては、学習用と検索用のクローラーを分けて設定できます。
例えばOpenAIでは、学習用のGPTBotを拒否し、検索用のOAI-SearchBotを許可できます。ただし、掲載を保証する設定ではありません。制御方法はサービスごとに異なるため、公式情報を確認しましょう。
施策・技術
サービスによっては、学習用と検索用のクローラーを分けて設定できます。
例えばOpenAIでは、学習用のGPTBotを拒否し、検索用のOAI-SearchBotを許可できます。ただし、掲載を保証する設定ではありません。制御方法はサービスごとに異なるため、公式情報を確認しましょう。