* 仕様書

[REFS[
- [1] [CITE[Robots Exclusion]] <http://www.robotstxt.org/wc/exclusion.html#meta>
- [7] [CITE@ja[メタ タグ - ウェブマスター ツール ヘルプ]] ([TIME[2013-03-10 04:39:35 +09:00]] 版) <http://support.google.com/webmasters/bin/answer.py?answer=79812>
]REFS]

* 仕様書から

** Google のヘルプ

[9] >>7 には次のようにあります [TIME[2013-03-10T04:42:25.100Z]]:

[FIG[
[8] 
>
[PRE(HTML code)[
<meta name="robots" content="..., ..." />
<meta name="googlebot" content="..., ..." />
]PRE]
>
クロールとインデックス登録を行う検索エンジンの動作を制御します。robots メタ タグはすべての検索エンジンに有効ですが、googlebot メタ タグは Google でのみ有効です。デフォルト値は「all」と同じ意味の「index, follow」で特に指定する必要はありません。Google では次の値をサポートしています(複数の値を指定する場合はカンマで区切ります)。
-[CODE(HTML)@en[noindex]]: ページをインデックスに登録しないようにします
-[CODE(HTML)@en[nofollow]]: Googlebot がページのリンクを追跡しないようにします
-[CODE(HTML)@en[nosnippet]]: 検索結果にスニペットを表示しないようにします
-[CODE(HTML)@en[noodp]]: ODP/DMOZ の代替説明を使用しないようにします
-[CODE(HTML)@en[noarchive]]: Google でページのキャッシュ リンクを表示しないようにします
-[CODE(HTML)@en[unavailable_after:[date] ]]: ページのクロールとインデックス登録を中止する正確な日時を指定します
-[CODE(HTML)@en[noimageindex]]: Google の検索結果に表示される画像の参照元ページとしてページを表示しないようにします
>HTTP ヘッダーの「X-Robots-Tag」ディレクティブを使用して、ページのヘッダーに情報を記述することもできます。これは、画像や他のドキュメントなど、HTML 以外のファイルに対するインデックス登録を制限する場合に特に便利です。robots.txt について詳しくはこちらをご覧ください。

>
verify タグを除き、ほとんどのメタ タグでは大文字と小文字は区別されません。
]FIG]

* 歴史

** HTML4

[REFS[
- [10] [[HTML 4]]
-- [CITE[Robots and the META element]]
<http://www.w3.org/TR/html4/appendix/notes.html#h-B.4.1.2>
-- [2] [CSECTION[A.1.2 Errors that were corrected]]
<http://www.w3.org/TR/html4/appendix/changes.html#h-A.1.2>
]REFS]

[11] [[HTML 4]] は附属書 B (参考) で簡単に解説しているだけです。

[12] HTML 4.01 での修正を根拠に
[CODE(HTML)[ROBOTS]] の [CODE(HTMLa)[[[content]]]]
は大文字・小文字を区別するという説が出ましたが、
正式な仕様 [SRC[>>1]] では区別''しない''としており、
HTML 4 の記述は [CODE(HTMLa)[content]]
属性に関する一般論と [CODE(HTML)[ROBOTS]]
の時の属性値に関する話が混じって混乱を招いたのだと考えられています
[SRC[html-lint]]。

* メモ

[3]
[CITE[Google supports META NOODP tag]] ([CODE[2008-01-31 08:41:04 +09:00]] 版) <http://www.mattcutts.com/blog/google-supports-meta-noodp-tag/>

[4]
[CITE[Inside Google Sitemaps: More control over page snippets]] ([TIME[2007-12-05 05:16:03 +09:00]] 版) <http://sitemaps.blogspot.com/2006/07/more-control-over-page-snippets.html>

[5] [CITE[Official Google Webmaster Central Blog: Using the robots meta tag]] ([CODE[2007-03-06 22:21:54 +09:00]] 版) <http://googlewebmastercentral.blogspot.com/2007/03/using-robots-meta-tag.html>

[6] [CITE[ACAP - Automated Content Access Protocol v1]]
( ([[IPTC PR Team]] 著, [TIME[2012-09-19 08:03:13 +09:00]] 版))
<http://www.the-acap.org/documents.php>