Google将支持新META标记 可避免索引特定页面
Google爬虫系统主管Dan Crow在出席一年一度的SEMNE（Search Engine Marketing New England）时不小心透露了一些我们期望看到的好消息。一种新的META标记将会出现，可以帮助网站管理员隐藏一些敏感信息或者它们希望不需要/不想被人看到的信息。如，一个应用程序信息在8月31日过期，之后搜索引擎就不应该再索引这则信息。
所以，一个称为"unavailable_after"的新标记就能实现这一点，人们可以借此告诉Google特定页面在特定日期后不再被爬虫索引。这很有用，它可以明确告诉搜索引擎爬虫哪些内容、在哪个时 www.hbjyled.com www.xianledping.com 间段有效，也可以很好的保护自己的特定内容不被搜索引擎泄露出去。例如，一篇文章的前半部分希望别人看到，而后面部分则要隐藏起来，此时这种方法就会很有用。
以前，要实现这目标需要在robots.txt文件上大费周章，致使这个文件变得很大，有了这种新标记，一切都变得简单。但是，这个标记对其他搜索引擎是无效的，Garett Rogers说这个标记的使用方法可能为如下形式：<META name=”unavailable_after” content=”Wed, 01 Aug 2007 00:00:01 GMT”>.
学习到了，之前一直没注意过这个点，受教了
页:
[1]