2007-04-03から1日間の記事一覧

robots.txt

品のよいロボットからアクセスされたくないディレクトリやファイルを指定されるための仕組み。個人的には、公開されたページは一人でも多くの人に見てもらいたいから、ロボットの訪問を断ろうと考えたこともない。特定少数の人だけがアクセスするページは…