タグ / robots.txt
記事
robots.txtを隠したい [2017/08/13 00:00]
私が運営しているサイトのrobots.txtはブラウザで閲覧できてしまう。
実害はないらしいが、あまり良い気はしない。隠す方法はないのかなあ。
私のサイト以外にも、robots.txt の内容を表示できてしまうサイトは結構ある。
ファイル名は robot.txt ではなく、robots.txt らしい。
文字コードはUTF-8で、robots.txtはサイトのルートディレクトリに設置する。
サブディレクトリに設置しても認識されないらしい。
..
.pgpass Adsense allow_url_include Basic認証 Bootstrap crontab cURL関数 Developer ID Installer eFax Font Awesome GMO Google Tag Manager googleアナリティクス GTM HLOOKUP http only属性 Instr関数 mcrypt MySQL phpMyAdmin Postgresql quickform Richo Imagio robots.txt sharepoint Sierra Smarty SQL str_replace Validatation xampp ウィルスバスター クリップボード ビルド ファイルメーカープロ17 フレームワーク 事業税 全角スペース 租税公課
