キャッシュの更新とrobot.txtについて
- キャッシュの更新方法とrobot.txtの影響について質問です。
- ブログで<meta name="robots" content="noindex,nofollow">を使用した場合、キャッシュは削除されるのか疑問です。
- 古いキャッシュを残さずに最新の内容に更新する方法を教えていただけないでしょうか。
- ベストアンサー
キャッシュの更新とrobot.txtについて
ネット上に保存されるキャッシュと、robot.txtに関して2点質問させて頂きま す。 (1)自分が利用中のブログで、例えば最近になってテンプレートに <meta name="robots" content="noindex,nofollow"> と入れた場合、次にクロールされると、以前にキャッシュされた内容は 削除されますか? それとも、上記robot.txtを入れてしまうと、かえって古いキャッシュはそのま まになってしまうのでしょうか? 少々わけありまして、なるべく古いキャッシュを読まれないよう・残らないようにしたいのです。 ゆくゆくはデータベースになるべく残らないないようにしたいですが、 その前に、古いキャッシュよりは、修正した最新の内容に書き換えられることを望みます。 そのためのなにか良い方法がありましたら、併せてお願い致します。 ※googleに削除依頼を出せるほどの理由ではありません。。 (2)yahooサーチのデータベースも上のことが反映されますか? どうぞよろしくお願い致します。
- sora-mame33
- お礼率100% (13/13)
- その他(インターネット・Webサービス)
- 回答数1
- ありがとう数1
- みんなの回答 (1)
- 専門家の回答
質問者が選んだベストアンサー
noarchiveを追加して下さい。web上のキャッシュを消す命令です。 商品を頻繁に入れ替えるような商店で有効ですから、ご意志には沿えるでしょう。 robots.txtによる拒否はmetaタグより強力に機能しますが、キャッシュとは関係ありません。 こちらの記事によればヤフーでは便利と判断したときnoindexを無視するそうです。 http://www.suzukikenichi.com/blog/how-to-use-meta-noindex-nofollow-noarchive/ ヤフーは昨年からサーチエンジンをgoogleと同一にしており、 基本的に両者に大きな違いはありません。
関連するQ&A
- HTMLにこのような
記述があります。 --------------------------------------------------- <META name="ROBOTS" content="NOINDEX"> <META name="ROBOTS" content="NOFOLLOW"> <META name="ROBOTS" content="NOINDEX, NOFOLLOW"> <META name="ROBOTS" content="NONE"> <META name="robots" content="noindex"> <META name="robots" content="nofollow"> <META name="robots" content="noindex, nofollow"> <META name="robots" content="none"> ----------------------------------------------- これはどんな記述でしょうか?巡回ロボットを回避する 記述でしょうか? 自分でこれを記述した記憶がありません。
- ベストアンサー
- HTML
- ロボット検索にかからないようにするには?
HPを作ろうと思うのですが 個人的なページで、内輪だけで楽しみたいページにしたいと思っています。 ですが、聞くところによると勝手にロボットが検索しに来るとか。 それで、それを避けるには <head>~</head>間に <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> <META NAME="ROBOTS" CONTENT="NOARCHIVE"> というようなタグを入れる方法があるというところまでは分かったのですが このタグは、ページごとに全部入れないといけないのでしょうか?
- ベストアンサー
- その他(インターネット・Webサービス)
- 検索避けのメタタグの数と効果
現在は、3個程度入れているのですが、とあるサイトで下記くらい入れることをオススメされていました。 <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> <meta NAME="ROBOTS" CONTENT="NOINDEX"> <meta NAME="ROBOTS" CONTENT="NOFOLLOW"> <meta NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> <meta NAME="ROBOTS" CONTENT="NONE"> <meta NAME="robots" CONTENT="noindex"> <meta NAME="robots" CONTENT="nofollow"> <meta NAME="robots" CONTENT="noindex, nofollow"> <meta NAME="robots" CONTENT="none"> <meta NAME="LIBWWW-PERL" CONTENT="NOINDEX"> <meta NAME="LIBWWW-PERL" CONTENT="NOFOLLOW"> <meta NAME="LIBWWW-PERL" CONTENT="NOINDEX,NOFOLLOW"> <meta NAME="LIBWWW-PERL" CONTENT="NONE"> <meta NAME="libwww-perl" CONTENT="noindex"> <meta NAME="libwww-perl" CONTENT="nofollow"> <meta NAME="libwww-perl" CONTENT="noindex,nofollow"> <meta NAME="libwww-perl" CONTENT="none"> <META http-equiv="robots" content="noindex"> <META http-equiv="robots" content="nofollow"> <META NAME="GOOGLEBOT" CONTENT="NOINDEX, NOFOLLOW"> <META NAME="GOOGLEBOT" CONTENT="NOARCHIVE"> <META NAME="GOOGLEBOT" CONTENT="NOSNIPPET"> <meta name="robots" content="noimageindex"> <meta name="robots" content="noimageclick"> <meta name="Expires" content="August 31, 2003"> 3個程度と上のタグを全部入れるのとでは、やはり違ってくるのでしょうか? 手間ではないので、効果があるのなら入れたいと思っています。 どうぞ宜しくお願い致します。
- ベストアンサー
- その他(インターネット・Webサービス)
- ロボット検索を拒否したい。
教えて下さい。 ロボット検索を拒否したいと思いましてHPの各ページに <meta name="robots" content="noindex,nofollow"> を入力してロボット検索を拒否しています。 ただしトップページだけはYahooで検索されてしまいます。 最近<meta name="robots" content="noarchive">も追加したのですが、 検索されてしまいます。 何か原因は考えられますでしょうか?
- ベストアンサー
- HTML
- インデックスに登録されたページの総数
ページ内に <meta name="robots" content="noindex"> <meta name="robots" content="nofollow"> を入れてるのですが ウェブマスターツールで インデックス ステータス 昨年のデータを表示 を見たら、 インデックスに登録されたページの総数 308 となっています。 これはどういう事でしょうか? <meta name="robots" content="noindex"> <meta name="robots" content="nofollow"> はクロールされないためのソースだと思っていたので インデックスに登録されたページの総数は、0になると思っていたのですが。 ちなみにトップページだけではなく 全てのページに <meta name="robots" content="noindex"> <meta name="robots" content="nofollow"> を入れています。
- ベストアンサー
- HTML
- YAHOOからキャッシュを削除する方法はありますか?
WEB SITEを作成し、アップロード→各種検索エンジンへの登録を行いました。 その後、SITE内に不具合があったため、全てのページを削除しました。しかしながらキャッシュが残ってしまう為、googleに関しましてはキャッシュ削除の対策を施し、キャッシュもサイト検索も行われなくなったのですが、YAHOOに関しては残ってしまいます(YAHOOのディレクトリー検索ではありません)。YAHOOのキャッシュ削除及び、サイト検索拒否を短時間で行う方法はありますでしょうか? index.htmlには <META NAME="ROBOTS" CONTENT="NOARCHIVE"> <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> のタグを埋め込み、ルート上にrobots.txtを配置し User-Agent: * Disallow: / と記述してあります。
- 締切済み
- レンタルサーバ・ASP
- ホームページのロボット制御について
ホームページのロボット制御について疑問があります。 index.html(トップページ)だけはロボットの登録対象にしたいが、その他の全ページは すべて登録対象にしない場合のメタタグについてなんですが、調べたら index.html(トップーページ)には <META NAME="ROBOTS" CONTENT="NOFOLLOW">を記述しこのページを登録対象にし、かつこのページのリンクを辿らないようにする。 それ以外のファイルはすべて <META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">と記述すると書いてありました。 しかし、そもそもindex.htmlに記述したメタタグによってindex.htmlページ内のリンクを辿らないわけなので、その他のファイルにあえてメタタグを何も書かなくてもその他のファイルはindex.htmlから辿られず、インデックス化されない気がするんですがどうなんでしょうか? a.htmlやb.htmlなどその他の全ファイルにも <META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">と記述しないといけないんですかね?
- ベストアンサー
- HTML
- ロボット検索のnofollowについて
よろしくおねがいします。 検索されたくないので <META NAME="Robots" CONTENT="noindex, nofollow"> というタグ?を入れようと思っています。 HTMLの内容は (1) 自分の趣味などのこと(私は薔薇が好きです) (2) 上記のイメージを別ページで開く為のリンク(薔薇のgif600×600) (3) 花屋さんのリンク(薔薇を買ったのはこのお店です。) このような場合、 <META NAME="Robots" CONTENT="noindex, nofollow"> を入れてしまうと、 (3)にも影響が出てしまうのでしょうか? (1)(2)は自分で作成したものなので検索されたくありません。 (3)は検索された方が良いです。 記述例として、 CONTENT="noindex, nofollow" … そのページとリンク先ページの収集を許可しない とありました。 http://www.tagindex.com/html_tag/page/meta_03.html (3)が複数あった場合、などどうしたら良いのか悩みます。 よろしくお願いします。
- ベストアンサー
- HTML
- ロボット検索の拒否ができない。
ホームページをフレームで作成しているのですが、 indexのみが検索にかかるようにしたいと思い、 他のページには下記のタグをいれました。 <HEAD>~</HEAD>に <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> しかしロボット検索に単体ページで引っかかるのです。 なにか違っていますか? ロボット検索の拒否ができない訳は外になにかあるのでしょうか。 教えてください。
- ベストアンサー
- レンタルサーバ・ASP
- サーチで引っかからないブログを作成したい
<META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">というタグを挿入すると、そのホームページはロボット検索には引っかからないそうですね。 そこで質問なのですが、 このタグを利用してブログサーチ(goo等)で引っかからないブログを作成することはできますか?
- ベストアンサー
- ブログ
お礼
早速に親切なご回答をありがとうございます。 とても助かります! リンク先も読ませて頂きました。 たいへん勉強になり、疑問がスッキリいたしました。 早速活用させていただきます。 ありがとうございました。