robots.txtを設置
robots.txtは本来、クローラーにこのページを読むな、インデックスするなと指示するファイルですが、
ここにサイトマップがあるから読め、と指示することもできます。
インデックスされたくてウズウズしている人が禁止指示は出さないと思うので、
サイトマップを読む指示の出し方だけ解説します。
まずは新しいテキストファイルを作り、名前を「robots.txt」にしましょう。
名前を間違えないよう注意して下さい。
次に、空のrobots.txtに１行だけタグを書き込みます。
Sitemap:サイトのURL/sitemap.xml
これだけです。
例えば、このサイトのrobots.txtは「Sitemap:http://yst-seo.com/sitemap.xml」の１行だけ。
他は何も書かなくてOKです。
後はサイトのトップ階層にこのrobots.txtをアップしたら完了。
簡単でしょう？
