ロボット巡回の拒否や受け入れについて。
METAタグは
から内に記述します。まずはロボット巡回を拒否したい場合はこちら。
<META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW,NOARCHIVE">
NOINDEX：このページを記憶しない
NOFOLLOW：このページからリンクを辿らない
NOARCHIVE：キャッシュ等に保存しない
逆にロボット巡回を受け入れたい場合はこちら。
<META NAME="ROBOTS" CONTENT="INDEX,FOLLOW">
