web-dev-qa-db-ja.com

CloudFrontをアクティブ化した後、Googleクロールレートが低下しました

以前は、静的コンテンツ(js、cssなど)にAmazon CloudFrontを使用していました。しかし、Originサーバーの負荷を軽減し、国際的なユーザーに優れたユーザーエクスペリエンスを提供できるようにするため、CloudFrontを介していくつかのサイトを提供することにしました。

ページのロード時間が非常に短くなることに気づきましたが、Googleウェブマスターツールを確認すると、CloudFrontでアクティブ化されたすべてのサイトで1日あたりのクロールされたページが大幅に減少していることがわかりました(平均3500から150まで)。また、サイトの1つがGoogleサイトマップ(GWTで「保留中」とマークされている)に問題があり、Google SERPで新しいページまたは更新されたページが更新されていないようです。残りのサイトは、Google SERPでいくつかの更新を取得しますが、CloudFrontをアクティブ化する前に比べて非常に少数です。

CloudFront(または他のCDN)を介したフルサイト配信の経験があり、SEO/Googleに影響を与えている人はいますか?洞察や提案を喜んでいます。リスクは、これが続く場合、CloudFrontを削除する必要があることです。

2
SimonG

CDNを追加したときに、サイト全体のSSLも追加しましたか?行った場合、WMTの現在のサイトはHTTPであり、HTTPから離れたため、クロールされなくなります。

そのため、WMTの前にhttps://として新しいサイトを追加すると、すべての印象とすべてが通常に戻って表示されます。

1
Manish

キャッシュヘッダーを追加すると、Googlebotが実行する必要のあるクロールの量が減る可能性があります。ページを1週間キャッシュできることをGooglebotに伝えている場合、そのキャッシュが期限切れになるまでページが再びクロールされない場合があります。

0