网站建立Robots.txt和sitmap.htm的必要性及意义深远，像Robots.txt它是专门用来同网络蜘蛛交互用的专用文件。这也就是SEOer老是去屏蔽网站页面不想被搜索引擎抓取的原因，它是一个网站和搜索引擎蜘蛛对话的重要工具，但是蜘蛛是否都遵循站长对其实施的规则呢?
k. M% z1 Y/ M$ f9 w8 z3 n' ?' r& B6 F9 u- ]8 z
其实蜘蛛遵循还是得看蜘蛛出身，素质高的会遵循规则，相反则不遵循。
; H3 }) v2 S G6 `2 |7 z. ^4 J* v# t: @% B! x
另外在网站中放入一个叫做sitmap.htm的网页，并将它作为网站的入口文件，这也是蜘蛛与网站的交互方法。
/ B; j, C" e2 ^7 ]( M" {' H
: }& M1 r' r( |( q. \" ` 对于交互性的SEO手段，我们了解了就可以针对性的做出符合搜索引擎的蜘蛛喜好的网站地图。- |# g3 [& n& j$ E0 l- T3 n- w
% f8 x( t2 q) m; r3 U
页面Meta字段也是站长经常使用的搜索引擎优化技术，这个字段通常会放在文档的头部，很多站点都只是简单的写个允许百度抓取的字段，正不正确笔者不清楚，SEO其实很多现象都是基于数据分析对比才能得知。Meta字段蜘蛛可以在没有读取到全部文档的情况下就了解文档的相关信息，可以避免将无效的网页取下来后又将其废弃而造成无谓的浪费。
- t+ Q5 a0 w- K# m, w( H0 {- F- ~
为蜘蛛程序建立站点地图
N2 v8 G- U0 ~3 e( x9 R P# U' L( [* D& P V' j9 h6 z
1、适用于不同搜索引擎的网站地图 t2 H( }* i1 ~: E: ^- i
+ s% W/ c3 Z+ h0 e
百度：建议使用Html格式的网站地图
: H$ J. b: F8 \5 ]( I5 q6 h$ A3 t- B; R& f" D) K, T9 K. B
Google：建议使用Xml格式的网站地图
' r6 f. Z( I3 o3 o' _+ t q9 U! K# p, g* _) [8 Q
Yahoo：建议使用Txt格式的网站地图
, c: _7 D# Z" F3 t) s5 g+ c" Y& \
. L: y& o8 j' N: D2 g, u7 ~& } 2、Robots文件& p# _0 R6 ~& z) e
/ G* q! v3 T3 P8 _& @1 L 必须把站点地图文件放在一个搜索程序容易接近的地方，在你的robots文件中为站点地图注明：URL" F/ y. Q' R$ _0 k
. L. N% A/ k x3 j. I$ ~
3、保持更新
1 f/ s& {( d: G& z* z% Z% u2 ~. r- ^8 I8 f9 a! `" S$ O; k
确保你的网站地图文件经常更新和上传，至少在你增加网页和删除网页的时候要这么做。大型网站每月、每周甚至是每天都会自动执行更新。
- f+ Y4 L; i. w P/ m9 T
w! A! d" F! l8 C' ~3 e7 Y 任何一个网站只要内容更新+外链都能看到搜索引擎对该网站做出相对应的分析，进而增加页面权重，了解搜索引擎技术，从而为我们根据实质性的原理来进行搜索引擎优化，这才是SEO明智之举，而不是每天在那发外链更新网站内容，业余时间还是得学学相关技术。 (文：兰州最好的男科医院SEM 适用于：中国网络营销) |
