ここで、多くの新しいタイプのエラーを発見して報告します。 新しいデータを整理するために、エラーをサイトエラーとURLエラーの2つの部分に分けました。
サイトエラー
サイトエラーは、特定のアドレスには適用されないエラーです。サイト全体に影響します。 これらには、DNSエラー、Webサーバーへの接続の問題、robots.txtファイルへのアクセスの問題が含まれます。 以前はURLエラーとして報告していましたが、あまり意味がありませんでした。 それらは個々のアドレスに固有のものではありません。 代わりに、サイト全体の各タイプのエラーの失敗率を追跡します。 また、これらのエラーが頻繁に発生して注意が必要になったときに通知を送信しようとします。
また、これらの領域でエラーを(多くのサイトで見られるように)しなかった場合(そして、長い間経験していなかった場合)、このセクションでは気にしません。 代わりに、緑色のチェックマークを表示するだけで、すべてが正常に機能していることがわかります。
URLエラー
URLエラー-特定のページに固有のエラー。 これは、GooglebotがURLをクロールしようとしたときに、すべてがDNSで問題なく、サーバーに接続でき、robots.txtファイルを受信して読み取ることができ、このURLを要求するときに何かがうまくいかなかったことを意味します。 URLエラーを、エラーの原因に応じてさまざまなカテゴリに分類しました。 サイトにGoogleニュースデータまたはモバイル(CHTML / XHTML)データがある場合、これらのエラーに対して個別のカテゴリが表示されます。
少ないほど多い。
以前は、各タイプで最大100,000個のエラーが表示されていました。 このすべての情報を吸収しようとすることは、消火ホースから飲むようなものです。 また、これらのエラーのどれが重要か(開始ページが機能しなかった)か、それほど重要ではないか(一部のサイトがサイトへのリンクにタイプミスを犯した)を見つける機会がありませんでした。 並べ替え、検索、およびバグ修正の報告機能なしで100,000個のエラーをすべて表示することは現実的ではありませんでした。 新しいバージョンでは、最初に最も重要な間違いのみを提供することに焦点を合わせました。 各カテゴリについて、検討中に最も重要な1000のエラーを特定しました。 これらの上位1000個のエラーをソートおよびフィルタリングし、それらに関する情報を表示し、エラーが修正されたことを伝えることができます。
一部のサイトには特定のタイプのエラーが1000以上ありますが、各タイプのエラーの合計数と90日間のエラーのグラフを引き続き表示できます。 1000のエラーの説明とエラーの総数では不十分であると心配している人のために、最新のエラーをすべてダウンロードできるAPIを追加することを検討しています。 さらに情報が必要な場合はお知らせください。
また、robots.txtでブロックされたページのリストも削除しました。robots.txtの問題の診断には役立つことがありますが、意図的にブロックしたページが頻繁にあったためです。 エラーに注意を集中させたかったので、ロボットに閉じられているURLに関する情報は、近いうちに「サイト構成」セクションの「スキャナーへのアクセス」セクションに表示されます。
没入の詳細
メインリストから単一のURLエラーをクリックすると、URLが最後にクロールされた日時、問題が最初に気づいた日時、エラーの簡単な説明などの追加情報を含むパネルが開きます。
エラー情報パネルで、エラーの原因となったページのリンクをクリックして、アクセスしようとするとどうなるかを確認できます。 エラーを「修正済み」としてマークすることもできます(これについては後で説明します)。エラーの種類ごとにヘルプの内容を表示し、このURLを含むサイトマップのリスト、このURLにリンクする他のページのリスト、さらにはGooglebot詳細情報を取得するか、すべてが機能することを確認します。
行動を起こそう!
「クロールエラー」セクションの新しいバージョンでは、最も重要なURLエラーの問題の解決に集中できることをお知らせいたします。 エラーを評価したため、リストの一番上に、サイト上の破損したリンクの修正、サーバーソフトウェアのエラーの修正、デッドリンクの数を減らすためのサイトマップの更新、または301リダイレクトの追加など、今すぐ修正できるエラーがあります。ユーザーが「本物の」ページを取得できるようにします。 これは、URLがサイトマップに含まれているか、このURLにリンクしているサイトの数(およびサイトにリンクしているサイトの数)、このURLが最近検索からトラフィックを受け取ったかなど、多くの要因に基づいて決定されます。
問題を解決したと判断した後(URLをGooglebotとして表示することで修正を確認できます)、 フルアクセス権を持つユーザーであれば、エラーを「修正済み」としてマークできます。 これにより、リストからエラーが削除されます。 今後、このURLを再クロールしようとしたときにエラーメッセージが表示された場合、修正済みとしてフラグを付けたエラーはトップリストに含まれません。
スキャンエラーセクションの新機能に多くの作業を投入しましたので、お客様にとって非常に役立つことを願っています。 ご意見をお聞かせください。提案がありましたら、 フォーラムにアクセスしてください 。