web-dev-qa-db-ja.com

nofollowを代替言語リンクに追加すると、Googlebotがそれらの多くをクロールできなくなりますか?

多くのページ(30 MM +インデックス付き)のサイトがあり、長い間extremely high number of URLs on your site警告メッセージを受け取っています。特に類似したページ間、特に異なる言語テンプレートを持っているが同じコンテンツを持っているページで、Googleが見るURLの数を減らすことを考えています。

<head>にこれがあるすべてのページの現在:

  <link rel="alternate" hreflang="en x-default" href="http://mydomain.com/dir/page" />
  <link rel="alternate" hreflang="ja" href="http://ja.mydomain.com/dir/page" />
  <link rel="alternate" hreflang="ko" href="http://ko.mydomain.com/dir/page" />
  <link rel="alternate" hreflang="th" href="http://th.mydomain.com/dir/page" />
  <link rel="alternate" hreflang="es" href="http://es.mydomain.com/dir/page" />
  <link rel="alternate" hreflang="pt" href="http://pt.mydomain.com/dir/page" />

rel=nofollowまたはrobots.txtを追加すると、Googleが同じページの別のテンプレートをクロールするのではなく、クロールする必要のあるより重要なページに集中できるようになりますか?

1
Noam

通常、nofollowを追加しても、Googlebotがコンテンツを検出することは妨げられません。参照: リンクの「nofollow」属性は検索エンジンによるURL検出を妨げますか?

Nofollowリンクがそのページへの唯一のリンクである場合、Googleはインデックスを作成しません。あなたの場合、私はあなたの代替言語リンクがあなたの他のサイトへの唯一のリンクであると非常に疑います。 Googleが代替言語のサブドメインのページへのdofollowリンクを見つけると、そこにあるdofollowリンクで残りを見つけることができます。

ウェブマスターツールからの「サイト上のURLの数が非常に多い」という警告は、サイトがsupposedで多くのページを持っているかどうかを心配する必要はありません。 Googleは次のようなケースをより心配しています。

  • URLにセッションIDがあり、Googleがクロールするたびに異なるURLを持つように見えるサイト
  • 任意のURLのページを自動生成できるサイト

数百万ページのサイトはすべて、ウェブマスターツールでこのメッセージを受け取ります。バックアップするコンテンツがあれば、その数のページを持つサイトでも問題はありません。私は自分でそのようなサイトをいくつか使ってきました。そのため、ランキングに問題を抱えている人はいません。

3