web-dev-qa-db-ja.com

Googlebotが301リダイレクトURLを何度もクロールする

サイトwww.inzoco.comで問題が発生しています。

301コードを送信しても、何度もクロールされる古いURLがたくさんあります。

リンクチェッカーを使用してサイト全体を数回確認しましたが、これらのURLがどこにも生成されているという痕跡はありませんが、googlebotは主張し、毎日取得しようとします。

ボットが古いURLをどこで見つけるのか(これを知る方法はありますか)、どういうわけかリダイレクトが見られない場合はわかりません。

これは古いURLの1つです。

http://www.inzoco.com/crits/2-5-5-28-0-0-28074-0-0/listado-bar-en-alquiler-en-leganes-madrid.aspx

301でリダイレクトされました。

http://www.inzoco.com/crits/2-5-5-28-24-0-28074-0-0/listado-bar-en-alquiler-en-leganes-madrid.aspx

どんな手掛かり?

1
Angel

Locationヘッダーの内容:

/crits/2-5-5-28-24-0-28074-0-0/listado-bar-en-alquiler-en-leganes-madrid.aspx

これはURIではなく、単なるパスです。 valid Location header を試してください:

http://www.inzoco.com/crits/2-5-5-28-24-0-28074-0-0/listado-bar-en-alquiler-en-leganes-madrid.aspx
2
fuxia