特定のウェブページの、インデックスへの登録を拒否

HTMLのメタタグの記述、またはサーバーの設定で、サイト内の特定のウェブページをインデックスに登録することを拒否できます。

HTMLの<head>のなかに次の記述をします。

<meta name="robots" content="noindex">

上記は、すべての検索エンジンでインデックスへの登録を拒否する方法です。

ウェブページをホスティングしているサーバーのHTTPヘッダーの設定で、次のようなディレクティブを設定します。

X-Robots-Tag: NOINDEX

注意: robots.txtで巡回が拒否されているウェブページでも、公開されているほかのウェブページからリンクされていると、URLのみが検索結果に表示されることがあります（URLやドメイン名を検索キーワードにして検索した場合）。