> > なるほど、nofollowとnoneも噛ませるのか
> > よくわからんがrobot-controlとやらも使ってみよう
> > でもこれがgoogleに効くかどうかが実際あやしいんだけどな
> > よくわからん
> 
> Why is Googlebot asking for a file called robots.txt which isn't on my server?
> Robots.txt is a standard document that can tell Googlebot not to download some or all information from
> your web server. For information on how to create a robots.txt file, see The Robot Exclusion Standard. 
> http://www.google.com/faq.html

faqに書いてあったか。すまん
standardなものでよさそうだが、個人のディレクトリでいいかどうかが微妙だな

参考：2000/09/19(火)00時18分53秒