[2] 仕様書:
- [CITE[robotstxt.org]]
-- [ROBOTS94] [CITE[A Standard for Robot Exclusion]]
-- [ROBOTS97] [CITE[A Standard for Robot Exclusion]]
- [[HTML 4]]
-- [CITE[The robots.txt file]]
[ROBOTS94] が1994年の合意で、その後1997年に [[Internet Draft]] [ROBOTS97]
が書かれましたが、未完成のままです。 HTML 4 は附属書 B (参考)
の中で解説していますが、規定はしていません。
[1] ''robotはぢきについて''
[3]
HTML 4.0 の解説には間違いが沢山ありました。
HTML 4.01 では修正されています。
HTML 4.01
[CSECTION[A.1.2 Errors that were corrected]]
([[名無しさん]] [sage])