搜索引擎的Robots规则

大信古风 · 发表于 2013-08-17 18:44:04

　　无论是新手seo还是做过一段时间seo的人，都曾遇到过这样的问题吧，在做seo的时候，经常的改动网站，或是网站给的关键词与网站内容不符合，并且网站上还不让seo人员去改动，这对于seo来说，是一个悲剧。以下是我们总结的几条盾

　　搜引得擎的Robots规则

　　robots.txt是一种储存于网站根目次下的文本文件，用于奉告搜引得擎的爬行动物(spider)，此网站中的哪些内容是不应被搜引得擎的引得，哪些是可以被引得。通常认为，robots.txt文件用来搜引得擎对目标网页的抓取。robots.txt协议并不是一个规范，而只是约定俗成的，通常搜引得擎会识别这个文件，但也有一点时会。对于Google来说，使役robots也未必能阻挡Google将网址编入引得，假如有其它网站链接到该网页的话，Google傲然可能会对其施行引得。陈安之演讲视频 http://www.880050.com/chenanzhiyanjiangshipin 按照Google的说法，要想彻底阻挡网页的内容在Google网页引得中(纵然有其它网站链接到该网页)出现，需要使役noindex元标记或x-robots-tag。例如将下边的一行介入到网页的header局部。假如Google看见某一页上有noindex的元标记，便会将此页从Google的搜索结果中纯粹丢弃，而无论是否还有其它页链接至此页。淘宝开店教程技巧全集 http://www.xianfengchina.com/ 对于百度来说，情况和Google类似，假如有其它网站链接目标网页，也可能会被百度收录，从百度的申说页面上看，百度并不支持像Google那样经过noindex纯粹将网页从引得上删除，只支持使役noarchive元标记来禁阻百度预示网页快照。具体的语句如次。上头这个标记只是禁阻百度预示该网页的快照，百度会接续为网页建引得，并在搜索结果中预示网页提要。

　　做seo就是个长久之计，不能只想到现在，一定要考虑到网站未来，稳步求升是大计。以上这几点每天都做一些，在加上给自己的网站添加新鲜的血液，不久之后你的完整排名一定会上去

茫然 · 发表于 2026-01-12 15:51:02

说得很实在，没有夸大其词，这种真实分享太难得了

tdzhaokao · 发表于 2026-10-21 11:42:26

这个分享太实用了，刚好能用到，感谢楼主！

		自动登录	找回密码
密码			加入怎通

[其他] 搜索引擎的Robots规则