Su-Jine
SEOコラム > 第10回 Googleのフレッシュクロール対象サイトにするには？

第10回 Googleのフレッシュクロール対象サイトにするには？

　前回のコラムの続きです。フレッシュクロール対象サイトにするにはどうすればよいか？についてです。ちょっと専門的な用語も出てきますが、簡単に解説をするつもりですので頑張ってください。

　まず、フレッシュクロール対象サイトに関する有力な記事を紹介します。

• Google フレッシュクロールの仕組み・条件　（前編）
• Google フレッシュクロールの仕組み・条件　（後編）
• Googleフレッシュクロール(fresh crawl)　連日更新／毎日更新／小更新／プチ更新

　上記サイトを見ていると、フレッシュクロールに関するキーワードがいくつか出てきます。以下、上記サイトからの引用です。これらについて私なりの意見を書いていきたいと思います。

　まず、1番目の「PageRank 値が 3以上」というのは例外が多いため (PageRank 1のサイトでもフレッシュクロールサイトはあるため) 信憑性が低いと思います。次に 2番目の「更新頻度」は飛ばして、3番目の「フレッシュクロール対象サイトからのリンク」を考えたいと思います。「フレッシュクロール対象サイトからのリンク」はWeb全体がフレッシュクロールサイトになってしまうため、違うのではないかと思います。例えば、Yahoo!のトップページはフレッシュクロール対象ページであり、その直下のディレクトリもフレッシュクロール対象ページになります。その直下のディレクトリもフレッシュクロール対象ページになり、Yahoo!に登録されているサイトは全てフレッシュクロール対象ページになってしまいます。結局全てのWebページがフレッシュクロール対象サイトになってしまいますので、この条件は当てはまらないのではないかと考えています。

　飛ばした 2番目の「更新頻度」ですが、私はこの「更新頻度」が一番重要な要因だと考えています。これは 4番目のIf-Modified-Sinceヘッダと絡んでいて、更新が多いサイトはかなりの確率で200 OKを返すからです。また、If-Modified-Sinceヘッダについて、Googleの「Web マスターのための Google 情報」にも次のように書かれています。

　ここで、「If-Modified-Sinceヘッダって何？」と言う方も多いと思いますので、簡単に説明したいと思います。クローラは対象ファイルが前回クロールした日時から更新したかしていないかをチェックするのに、「そのファイルは2004年03月08日の午前0時以降に更新されていますか？」とWebサーバに訪ねます。Webサーバは「はい、更新されています。」か「いいえ、更新されていません。」のどちらかの回答をします。この「2004年03月08日の午前0時以降に更新されていますか？」の質問文が「If-Modified-Since: Mon, 08 Mar 2004 00:00:00 GMT」ヘッダで、「はい、更新されています。」に対応するのが「HTTP/1.1 200 OK」です。「いいえ、更新されていません。」に対応するのは「HTTP/1.1 304 Not Modified」と言うことになります。

　何となくイメージはつかめましたか？簡単に書くと、更新されたかされていないかをクローラが尋ねたときに、「更新されましたよ」と答える方がたくさんクローラが来るようになるのでは？と言うことを書いているわけです。

　しかし、ここで疑問が出てきます。下記の表を見てみるとわかるとおり、フレッシュクロール対象サイトの場合は 10日間の内 6回更新した場合、頻繁に更新しているサイトと言うことがわかりますが、月に 1度しかクローラが来ないサイトの場合は同じ回数更新していたとしても 1回しか「更新されていますか？」と問い合わせられないため、「頻繁に更新しているサイト」と判断できないのです。

　従って、フレッシュクロール対象サイトになるには更新されたという情報をクローラに伝える何かが必要となります。この続きは次回のコラムで書きたいと思います。

　今回のコラムで出てきたIf-Modified-Sinceヘッダですが、イメージはつかめましたか？ちょっと難しいので、実際に体験できるツール「If-Modified-Sinceチェックツール」を作りました。是非お試しください。

---

この情報はメルマガ (徹底解説SEO！〜誰も教えてくれないSEOの真実〜) で も配信しております。

| このコラムに間違いがあるときはこちらからご連絡お願いします |