ホーム / LLMO・AI検索用語集 / robots.txt対応するクローラーに、サイト内のどこを巡回してよいかなどを伝えるファイル。情報を秘密にするためのアクセス制御ではありません。同じ分類の用語クロール・クローラーインデックスnoindexサイトマップcanonical(正規URLの指定)JavaScript構造化データFAQAIクローラーユーザーエージェントサーバーログSSR・CSRllms.txtIndexNowSchema.orgJSON-LDsameAsOrganizationPersonWAFHTTPステータスコードリダイレクトGPTBotOAI-SearchBotChatGPT-UserGoogle-Extended用語一覧へ戻る