【11/26】
気付けば今月に入り、ほとんど更新してないこのサイト・・・日記だけでも更新しておきますか。(笑) 最近、ちょっと気になるのがMSNのサーチロボットの動き。 msnbot/0.3 (+http://search.msn.com/msnbot.htm) 他のロボットはCGIなどに対しては消極的なのに対して、msnbotはCGIに対してかなり積極的に読み込んでいくように思えます。 また、収集ページなども他のロボットと比べると群を抜いて多い。 10月のログでは1,924hitほどある。 一時期は、かなり酷い収集の仕方をしており、幾つかのISPより苦情が寄せられたとか。 自宅で、趣味範囲で建てているサーバにとっては大した負担にはならないのだが、ISPでは大勢のサイト公開ユーザーを抱え、その膨大なページに頻繁に短時間に収集しにこられたら、さすがに負担になる。 それは確かにISPも苦情を言いたくなる・・。 しかし同じ行動をGooglebotが行なったとしたならば、もしかしたら苦情にはならないかも知れない。 恩恵を受けている面が多い事から、逆に「来て欲しい」と思っている所も多いのではないかと。 msnbot・・・これだけ収集していって、恩恵を受ける時が来るのだろうか。 |