ホーム / LLMO・AI検索用語集 / クロール・クローラープログラムがWebページなどを巡回・取得することをクロール、そのプログラムをクローラーと呼びます。取得されたことだけで、回答での使用や推薦まで確認できるわけではありません。同じ分類の用語インデックスrobots.txtnoindexサイトマップcanonical(正規URLの指定)JavaScript構造化データFAQAIクローラーユーザーエージェントサーバーログSSR・CSRllms.txtIndexNowSchema.orgJSON-LDsameAsOrganizationPersonWAFHTTPステータスコードリダイレクトGPTBotOAI-SearchBotChatGPT-UserGoogle-Extended用語一覧へ戻る