2004-12-17 robot を蹴る方法 comp ちょっと古いが以下のサイトには,各 robot の User-Agent 名や習性が載っており,robots.txt を書くのに便利だ. http://c-moon.jp/robots.shtml