ノードの運用アレコレ

64829c4e :Anonymous 2013-09-09 21:36

行儀のいいクローラーは robots.txt を見てくれるみたいだけど
反映まで少し時間がかかるとか？