Google /検索エンジンのSEO結果からサブドメインを非表示にしますか?


11

検索エンジンの結果に表示したくないサブメインがあります。私が持っているとしましょう:

  • http://www.example.com
  • http://child.example.com

検索エンジンの結果に現在表示されているドメインのすべての URL を非表示にするにはどうすればよいchild.example.comですか?

回答:


14

サブドメインのウェブサイトのディレクトリのルートに、robots.txtというファイルを追加します。

User-agent: *
Disallow: /

これにより、Webクローラーはサイトをインデックスに登録しないように指示されます。彼らは従う必要はありませんが、主なものは従います。


こんにちは、これは最高のことだと思います。そして、もう1つ知らせてください。そうした場合、Web結果に影響を与えるにはどのくらいかかりますか?(例:Google検索)時間は必要ですか、それとも突然かかりますか?
夏期劇場

2
次回インデクサーがサイトをクロールするときに確認されます。これは、サイトがどの程度重要であるかによって、数分から数週間になる可能性があります。サイトをGoogleとBingのウェブマスターに追加して、robots.txtを再度読み取ることで、物事をより迅速に進めることができます。また、インデックスからページを削除することもできます。
Paul

1
プロセスをスピードアップしたい場合は、google.com / webmasters / tools / removalsでGoogleの削除リクエストを送信し、bing.com / toolbox / submit-site-urlでBingのURLを送信できます(はい、これが推奨されています)ページを削除する方法)。
Kat

noindexサブドメインのインデックスやその他のページにも追加する必要があります
Anagio

共通のルートフォルダーがあり、サブドメイン名が動的である場合、どうすればよいですか?stackoverflow.com/questions/21229235/...
Gopi

6

サブドメインでrobots.txtファイルを使用すると役立ちます(Googleはこれに従います)が、別の手順として、このサブドメインをインデックスに登録しないようにGoogleウェブマスターアカウントで指定できます。サブドメインのすべてのページでメタタグを使用することもできます。

    <meta name="robots" content="noindex">

これがたまたま内部テストにのみ使用しているサイトである場合、仮想ホストファイルで特定のIPアドレスのセットに可視性を制限すると、サイトがさらに非表示になります。


すべてのページで????? オハイオ州..
夏期劇場

@ 4lvinサーバー側から動的に行われます。コーディングする必要があるのは1回だけです。個別のHTMLページをコーディングしていると言わないでください。
ケンゾー

LoL、実際には「はい」。これは非常に古い/レガシーWebサービスシステムであるためです。(それがダウンする必要がある理由です)多くの孤立したページが中にあります。:D
夏期劇場

@ 4lvin痛い...それで頑張ってください!
Kenzo

1
metaすべてのページにnoindex タグを埋め込む代わりにX-Robots-Tag、指定したサブドメインのサーバーからHTTP応答ヘッダーを返すことができます-これは一度だけ実行する必要があります。
MrWhite

2

KenzoとPaulのソリューションは優れています。Webページにnoindexメタタグを配置し、robots.txtを追加してロボットを禁止できます。

しかし、私の意見では、最善の解決策は、サブドメインでパスワード認証を使用することです。これは、ロボットがWebサイトにアクセスしてインデックスを作成できる唯一のソリューションです。Apacheを使用している場合は、htpasswdを実装できます。


2

...現在SEOの結果に表示されていますか?

他の答えは、検索結果からページを積極的に削除するのではなく、主に(サブ)ドメイン(主に質問の対象です)のインデックス作成を防止することです。あなたの他の質問

他の回答に記載されているように、robots.txtでサイトをブロックし、noindex metaタグ(またはX-Robots-TagHTTP応答ヘッダー)を提供する必要がありますが、ページへのアクセスをブロックし、404または410ステータスコードを返す必要もあります。

詳細については、Googleウェブマスターツールのヘルプページをご覧ください。
コンテンツを削除するための要件

これらすべての準備が整ったら、GoogleウェブマスターツールのURL削除ツールを使用できます。ただし、これはサイト全体ではなく、個々のURLにのみ適用されますが、それは出発点です。(Googleは、robots.txt、noindex、404の提供がGWT削除ツールを使用するための要件であると述べています。)

ただし、通常のユーザーがURLを入力してサイトにアクセスできるようにしたい場合は、コンテンツが利用できなくなるため、問題になります。Zistoloenが示唆するように、パスワードを設定できますが、デフォルトでは403(禁止)が返され、404/410を返すにはオーバーライドする必要があります。あなたは可能性がマントにGooglebotに410を返すと、誰もが入力できるように、あなたのコンテンツを-しかし、どのような人々がのSERPsで結果をクリックしてはどうですか?

ただし、Googleにできるだけ早くコンテンツを削除してもらいたい場合は、「Google」インターネットからコンテンツを削除する必要があります。

弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.