web-dev-qa-db-ja.com

WordPressのフレッシュインストールでRobots.txt問題を解決する方法？

私は数週間前にWordPressの新しいコピーをインストールし、そして私はいくつかの奇妙な問題を抱えています。

1 - このメッセージが表示されます： "FirstName LastName name-last.com/のコメントこのサイトのrobots.txtのため、この結果の説明はありません - 詳細をご覧ください。"私の名前をグーグルするとき。設定を再確認しましたが、[推奨しない]オプションが選択されていません

2-私はWP Better SecurityとYoast SEOプラグインをインストールしました。今、私は別の問題を抱えています！

私のドメインのRANDOM Webスニッフィングウェブサイトをグーグルすると、私のデータサーバーともっとたくさんのことが公開されます。

どこで私は間違えましたか ？

シモンズ：私のrobots.txtは昨日からプラグインフォルダのみを許可しないように修正されました（長すぎない）

seoplugin-wp-seo-yoastrobots.txt
1
0bserver07

今のあなたのロボットファイル：

User-agent: Googlebot
Disallow: 
User-agent: *
Disallow: 
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://www.yadfaeq.com

Googlebotには何も指定していないので、削除する必要があります。さらに、Disallow:はDisallow: /として解釈され、サイト全体をブロックする可能性があります。

あなたのロボットファイルはどうあるべきか：

User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://www.yadfaeq.com

Googleはrobots.txtファイルを頻繁にキャッシュするので、新しいファイルを確認するのに時間がかかる場合があります。 Googleが何をインデックスに登録しているかを管理するために、 Googleウェブマスターツール を使用することをお勧めします。

robots.txtファイルに対して行った変更は表示されません。おそらくあなたのサーバーもそれをキャッシュしていますか？

1
epilektric