ウェブマスターフォーラム

Web 制作 (SEO, SEM, CSS, Web デザイン等) に関する話題を扱うフォーラムです。

新規ユーザー登録 | パスワードを忘れた

テーマ : SEO (検索エンジン最適化)

★東京オフ会予定 3/1 (土)
★大阪オフ会予定 2/23 (土)
オフ会FAQ

SEO (検索エンジン最適化) に関する話題を扱います。

トピック : robots.txt の分析

次の古いレス20件 << 最新のレス20件 >> 次の新しいレス20件

No.1 - 2006年06月15日 09:15 toto （8ポイント）: グーグルサイトマップにある、robots.txt の分析は、
何を意味するのでしょうか。自ＨＰがグーグルインデックスから
削除をくらい、復活を目指してサイトマップに登録したのですが、
キャッシュに保存された robots.txt の分析によると、

ステータス　200/　解析結果ーrobots.txt ファイルが無効です

と出ます。意味は、ＨＰがキャッシュされていないと考えればいいのでしょうか？

robots の URL http://gag.client.jp/robots.txt
最終ダウンロード日 06/06/14 17:03:46 PDT
ステータス 200

解析結果値結果
http://gag.client.jp/robots.txt robots.txt ファイルが無効です

robots.txt ファイルをテストして変更を確認と、グーグルのページにあるのですが、robots.txt ファイルは、何を意味するかよくわからないのですが
No.2 - 2006年06月15日 11:05 報告者（44ポイント）: gag.client.jpのトップディレクトリにrobots.txtが本当にありますか？

どうやら、robots.txtのURLを表示しようとすると、http://gag.client.jp/__super_404/404.html に転送されますよ。
しかも、404 Not Foundじゃなくて302転送だから問題です。
404.htmlはrobots.txtの書式にあってませんから、「無効」と判断されても当然です。
No.3 - 2006年06月15日 11:18 BeeOnTheWeb （23ポイント）: >No.1

まずブラウザで robots.txt の内容が表示されるかを確認しましょう。

なお、Sitemap は、フィルタリングにひっかからないよう対処してから利用しないと、あまり頼りにならないと思いますよ。

投稿先はここでなく「Webサーバ」を選ぶべきでしたね。
No.4 - 2006年06月16日 00:30 toto （8ポイント）: ありがとうございました。

次の古いレス20件 << 最新のレス20件 >> 次の新しいレス20件