j3128.inktomisearch.com - -
[15/Aug/2002:13:39:46 +0900]
"GET /index.shtml/StarMax/language/language/software/StarMax/software/index.shtml.ja
HTTP/1.0" 200 2582 "-" "Mozilla/5.0 (Slurp/cat; slurp@inktomi.com; http://www.inktomi.com/slurp.html)"

途中の URI は意味がなくて、最後の葉(leaf) だけがあるのと同じ画面を表示する。

こういうのがうるさく。繰返し何行もある。 何故そういうのがあると信じてしまったかは、 もしかしたら自分の方の問題かも知れない。

これを何とかしたくて、 robots.txt には一応書いておいたが、 VirtualHost が違うせいもあるかも知れないが、 (それに多分すぐには効かないではないかという気もするし)
今は 404 が出るようにしている。それには、

1. DirectoryIndex の index.shtml の前に dummy.shtml を入れておく
2. 本物の index.shtml は dummy.shtml に名前を変える。 以上二点で / で来た場合は dummy.shtml を見る。
3. その上で、

   mkdir index.shtml
   echo empty > index.shtml/dummy.shtml
   

/ で終わる URI でなくて /index.shtml で来た場合、だめか。 empty って書くのではなくて、説明を書いておけばいい訳だ。 / に 接続しておいてもいいのかな。