中田さん、なかおさん、早速ご指導ありがとうございました。
私の粗末なサーバを検索などしてもどうしょうもないと思うのですが、とにかく安心しました。
なんだか安心するために質問しているようですみません。今後は過去ログの全検索でみつからない
ときはgoogleを使うなどしてもっと自助努力をしてみます。
lkb さん、
そうですね。
たとえば google で "/robots.txt" を検索すると、
http://www.lycos.co.jp/help/search/robot.html
http://tohoho.wakusei.ne.jp/wwwxx079.htm
(その他たくさん)
などが出てきます。
まあ、なかおさんの言うように気にしなくていいのですが、検索ロボットなどに検索されているということは喜んでもいいのではないでしょうか?
robots.txtは検索エンジンだと思います。
あまり気にしなくていいです
私は現在an httpd 1.35bを使っていますが、今日から
"GET /robots.txt HTTP/1.0" 404 215
が現れるようになりました。ワームに比べると非常におとなしい感じなんですが、かまわんで置くと何か悪さ
でもするのでしょうか。お聞かせください。