Googleがsitemap.xmlからのページのインデックス作成を停止したのはなぜですか?
私たちにはいくつかのページがありますsitemap.xmlが、Googleの公開検索インデックスに不可解に欠けています。 /superuser//sitemap.xmlをダウンロードすることはできません-過去に問題が発生したため、このファイルは保護されていますが、googlebotはできます。Googleウェブマスターツールを使用して、sitemap.xmlファイルが今日プルダウンされ、エラーなしで正常に評価されていることを確認しました(緑色のチェックマーク)。 にsitemap.xmlは、私たちのサイトで尋ねられた最後の50,000の質問のリストが含まれています。たとえば、この質問... /superuser/201610/how-to-see-the-end-of-a-long-chain-of-symbolic-links ... sitemap.xmlとして存在します... <url> <loc>/superuser/201610/how-to-see-the-end-of-a-long-chain-of-symbolic-links</loc> <lastmod>2010-10-20</lastmod> <changefreq>daily</changefreq> <priority>0.2</priority> </url> 「シンボリックリンクの長いチェーンの終わりを確認する方法」を検索すると、 questionhub.comにデータをスクレイピングしている結果が1つだけ表示されます(まったく別の問題)。 質問カウント数を増やして、質問タイトルを正確に検索すると、このパターンが持続することがわかります。 これらのURLはあるに sitemap.xmlとが、彼らはGoogleのインデックスに表示されない-とまだ彼らは私たちのクリエイティブ・コモンズのデータをこすりサイト上に表示されます。どうしてですか?