ここから本文です

サイトマップとrobots.txtについて教えてください。 CMSで自動生成されたページで...

アバター

ID非公開さん

2017/6/3023:11:24

サイトマップとrobots.txtについて教えてください。
CMSで自動生成されたページで、重複するページが多数あり、インデックスされてしまいました。

・/
┗直下にindex.php、a.html、b.htmlがあり、すべてインデックスされて良い。

・/blog/html/index.html
┗index.htmlのみインデックスされて良い。直下にある他のhtmlはインデックスされてほしくない。

・/blog/html/art/*.html
┗すべてインデックスされて良い。

・上記以外のhtmlはインデックスされたくない。

こういった状態です。
インデックスされたくないものは、サイトマップに記載しなければOKなのでしょうか?
robots.txtにも下記を記載しました

User-agent: *
Disallow: /blog/
Allow: /blog/html/index.html
Allow: /blog/html/art
Sitemap: http://●●/sitemap.xml

これでよいのか、よくわからずにいます。
ご指摘いただきたいです。

閲覧数:
21
回答数:
1
お礼:
25枚

違反報告

ベストアンサーに選ばれた回答

2017/7/111:22:28

だめだろうね

この回答は投票によってベストアンサーに選ばれました!

この質問につけられたタグ

みんなで作る知恵袋 悩みや疑問、なんでも気軽にきいちゃおう!

Q&Aをキーワードで検索:

Yahoo! JAPANは、回答に記載された内容の信ぴょう性、正確性を保証しておりません。
お客様自身の責任と判断で、ご利用ください。
本文はここまでです このページの先頭へ

「追加する」ボタンを押してください。

閉じる

※知恵コレクションに追加された質問は選択されたID/ニックネームのMy知恵袋で確認できます。

不適切な投稿でないことを報告しました。

閉じる