[1] 仕様書:
- [ROBOTS] [CITE[Robots Exclusion]] <http://www.robotstxt.org/wc/exclusion.html#meta>
- [[HTML 4]]
-- [CITE[Robots and the META element]]
<IW:HTML4:"appendix/notes.html#h-B.4.1.2">

[ROBOTS] が正式な reference です。 HTML 4 は附属書 B (参考)
で簡単に解説しているだけです。