アフィリエイト広告を利用しています

2017年08月13日

robots.txtを隠したい

私が運営しているサイトのrobots.txtはブラウザで閲覧できてしまう。

実害はないらしいが、あまり良い気はしない。隠す方法はないのかなあ。
私のサイト以外にも、robots.txt の内容を表示できてしまうサイトは結構ある。

ファイル名は robot.txt ではなく、robots.txt らしい。
文字コードはUTF-8で、robots.txtはサイトのルートディレクトリに設置する。
サブディレクトリに設置しても認識されないらしい。






タグ:robots.txt

posted by db-engineer at 00:00 | Comment(0) | 日々のこと

この記事へのコメント
コメントを書く

お名前:

メールアドレス:


ホームページアドレス:

コメント:

※ブログオーナーが承認したコメントのみ表示されます。

検索
最新記事
カテゴリーアーカイブ
プロフィール
db-engineerさんの画像
db-engineer
プロフィール
タグクラウド