画像・CSSの表示チェックができるWebクローラーツールの使い方

Search Console の「ブロックされたリソース」を活用すると、Google の技術に関するガイドラインにもあるように、結果的に検索ランキングに好影響をもたらすのに役立つ。

ここで言うリソースとは主に次の３つのデータを指す。

どれもサイトデザイン、画面操作時の挙動には欠かせないデータで、通常は問題なくブラウザ上で表示されるものだが、サイト管理者やシステム側でセキュリティを高めるために直接データにアクセスできないよう処理していることがある。

しかし、Google 側はこのリソースへのアクセス拒否を解除し、あなたのサイト表示を一般的なユーザーと同じようにクローラーが確認できるよう求めている。

まずはあなたのサイトの現状をチェックすることから始めよう。

注：ウェブマスターツールの名称が変更
Google は2015年5月20日にウェブマスターツールの名称を Google Search Console に変更している。

１．ブロックされたリソース画面へのアクセス方法

まず Search Console にログインしたら、対象のドメインをクリックする。次に下図のように左メニューを「Google インデックス → ブロックされたリソース」の順にクリックしよう。

特にクローラーがブロックされることなく、問題がなければ上のイメージのようにエラーは検出されない。それではもし、クローラーがブロックされた場合について解説しよう。

もしクローラーがリソースにアクセスできなかった時、次のように表示される。

ホストに掲載されるサーバー上に画像やCSSなどのデータが保存されている。このデータにアクセスできるように対処しなければならない。

ホストに表示されるURLには次の２つのパターンがある。

あなたのサイトURLが表示された場合、データにアクセスできるよう早急に対応しよう。外部サイトのURLが表示された場合、そのサイト管理者に連絡をとってアクセスできるよう対処してもうらう。

クローラーがアクセスできなかったデータは、URLをクリックすると確認できる。ここでは例としてあなたのサイトURLがあることを想定してクリックする。

すると次のようにデータとクローラーがブロックされた頻度が表示される。

実際にクローラーのアクセス拒否された状況が robot.txt によるものか確認してみた。

すると次の図の通り「wp-includes フォルダ以下のデータにはアクセスできません」という設定になっていた。（” Disallow “とは、クローラーのアクセスをブロックする指示のこと）

この記述を修正すればこのブロックされた状況は回避できる。このファイルを編集する場合は、『robots.txtの書き方と効果的な活用法』を参考にして慎重に行おう。