robots.txt – 無気力研究所

サーチエンジンのクロール阻止とかに使うrobot.txt。

昨日消してクロール許可しようと思ったんだけどな。。。

なぜか消えない。

FTPとかシェルからからは消えてる。
でも、URL入れると表示される。
Googleウェブマスターツールで見ても拒否されてるらしい。