搜索引擎周边

非HTML 文件的拒绝蜘蛛协议META 标签使用说明

2007年7月28日 Post by 散人 in Google 搜索引擎

如之前所说，Google 搜索引擎现在已经正式支持unavailable_after Meta标签了。关于它的详细用法与说明，可以参考以前的文章。但是，所有这些Meta标签都只能用于HTML 页面，对于其他类型的非HTML 文档（如PDF 文件、视频音频文件）则无济于事。为此，Google 扩展出了一个新的X-Robots-Tag 标签，使得非HTML文档也可以支持拒绝蜘蛛协议（REP），只要将其至于HTTP/1.1 头部区域即可。下面是几个例子。

如果想在Google 搜索结果中不显示文档的快照与头部信息，则使用：

X-Robots-Tag: noarchive, nosnippet

unavailable_after 标签在也同样可以用于此，如：

X-Robots-Tag: unavailable_after: 8 Jul 2008 18:30:00 GMT

除此之外，也可以多个X-Robots-Tag 标签一起使用。比如：

X-Robots-Tag: nosnippet
X-Robots-Tag: unavailable_after: 9 Jul 2010 00:00:00 GMT

版权所有，转载时必须以链接的形式注明以下声明：
原载于 搜索引擎周边
链接地址 http://www.eryi.org/SearchEngines/none-html-meta-tag.html