読み: ろぼっつてきすと
Webサイトのルートディレクトリに配置するテキストファイルで、検索エンジンのクローラーに対してクロールを許可・拒否するページを指示する。サーバーリソースの節約やクロールバジェットの最適化に使われる。ただしインデックスの制御にはnoindexを使う。
無料SEO診断で、御社のサイトの改善ポイントをお伝えします。