実害はないらしいが、あまり良い気はしない。隠す方法はないのかなあ。
私のサイト以外にも、robots.txt の内容を表示できてしまうサイトは結構ある。
ファイル名は robot.txt ではなく、robots.txt らしい。
文字コードはUTF-8で、robots.txtはサイトのルートディレクトリに設置する。
サブディレクトリに設置しても認識されないらしい。
タグ:robots.txt
【このカテゴリーの最新記事】
-
no image
-
no image
-
no image