站长们要注意的蜘蛛陷阱-武汉北大青鸟网络营销讲堂

　　【站长们要注意的蜘蛛陷阱-武汉北大青鸟网络营销讲堂】有很多站长朋友在做营销时，发现无论多么认真的工作，都无法与搜索引擎达到友好的态度，因而造成非常不利的百度蜘蛛抓取的，终导致网站的收录大受影响。武汉北大青鸟武汉宏鹏光谷校区的网络营销知识与诸位分享，在做网络营销环节时，一定要注意避免蜘蛛陷阱，以免给企业利益带来损失!

　　什么是蜘蛛陷阱

　　武汉北大青鸟网络营销讲堂：先，我们来简单了解下，什么是蜘蛛陷阱。“蜘蛛陷阱”是阻止蜘蛛程序爬行网站的障碍物，通常是那些显示网页的技术方法，目前很多浏览器在设计的时候考虑过这些因素，所以可能网页界面看起来非常正常，但这些蜘蛛陷阱会对蜘蛛程序造成障碍，如果消除这些蜘蛛陷阱，可以使蜘蛛程序收录更多的网页。在搜索营销的领域里，百度蜘蛛，对于人们来说，是既爱又恨的产物。是百度搜索引擎的一个自动程序。它的作用是访问互联网上的html网页(当然动态页面也可以抓取)，建立索引数据库，使用户能在百度搜索引擎中搜索到您网站的网页、图片、视频等内容。

　　蜘蛛陷阱的六大误区

　　武汉北大青鸟网络营销讲堂：1、强制用Cookies2、框架结构5、各种跳转3、Flash1、登陆要求4、动态URL

　　武汉北大青鸟网络营销讲堂 蜘蛛陷阱避免战术

　　一、各种跳转

　　除非万不得已，尽量不要使用301转向以外的跳转。如果必须转向，301转向是搜索引擎的、用于网站更改的转向，可以吧页面权重从旧网址转移到新网址。其他的转向方式都对蜘蛛爬行不利。除了301跳转以外，搜索引擎蜘蛛对其他形式的跳转都比较敏感，如302跳转，javascript跳转、meta refresh 跳转。

　　二、框架结构

　　搜索引擎无法判断这个网址的内容是什么。使用框架结构设计页面，在网站诞生初期曾经听流行，但是现在网站已经很少使用框架了，不利于搜索引擎抓取是框架越来越不流行的重要原因之一，对于搜索引擎来说，访问一个使用框架的网址所抓取的html只包含调用其他html文件的代码，并不包含任何文字信息。

　　三、动态URL

　　虽然百度现在已经能够识别动态URL了，但是也不能保证百分百能识别。动态URL值的是数据库驱动的网站所生成的、带有问号、等号及参数的网址。一般来说动态URL不利于搜索引擎蜘蛛爬行，应该尽量避免。

　　四、javaScript链接

　　由于javaScript可以创再出很多吸引人的视觉效果，有些网站喜欢使用javascript脚本生成导航系统。这也是比较严重的蜘蛛陷阱之一，虽然搜索引擎都在尝试解析JS脚本，不过我们不能寄希望与搜索引擎自己去客服困难，而要让搜索引擎跟踪爬行链接的工作尽量简单容易。jacascritp链接在SEo中也有特殊用途，那就是站长不希望被收录的页面，比希望被百度抓起的链接，可以使用javascript脚本阻止搜索引擎蜘蛛爬行。

　　五、要求登录

　　有些网站的内容需要用户登录后才能看到的页面，这部分内容搜索引擎是无法看到的。

　　六、强制使用cookies

　　搜索引擎蜘蛛就相当于一个禁止了cookies的浏览器，强制使用cookies只能造成搜索引擎蜘蛛无法正常访问。很多网站为了实现某种功能，强制使用cookies,用户浏览器如果没有启用cookies，页面显示不正常。

　　七、FLASH

　　还有网站在页的banner就使用一个flash，并且添加活动链接，虽然对用户来说能够直观的看到活动内容，但是对于蜘蛛来说，就无法识别，而且抓取不到flash的链向地址。有的网站整个页就是一个很大的flash，这就构成了蜘蛛陷阱。搜索引擎住宅区的html代码只有一个链向flash文件的链接，没有其他文字内容。

　　八、Session ID

　　搜索引擎蜘蛛的每一次访问也会被当成一个新的用户，URL中会加上一个不同的session ID，这样搜索引 擎每次来访问时所得到的同一个页面的URL将不一样，后面带着一个不一样的session ID。这也是常见的蜘蛛陷阱之一。有些网站使用sission ID(会话ID)跟踪用户访问，每个用户访问都会生成一个独特的session ID，加在URL中。

　　九、各种跳转

　　如果必须转向，301转向是搜索引擎的、用于网站更改的转向，可以吧页面权重从旧网址转移到新网址。其他的转向方式都对蜘蛛爬行不利。所以除非万不得已，尽量不要使用301转向以外的跳转。除了301跳转以外，搜索引擎蜘蛛对其他形式的跳转都比较敏感，如302跳转，javascript跳转、meta refresh 跳转。

　　十、robots.txt书写方式

　　比如说隐藏文字，隐藏链接等，采用伪装网页在判断来访者是蜘蛛还是普通浏览器者而显示不同的网页，使用默认错误的404页面等，同样会给蜘蛛带来爬行障碍。(这个是比较关键的，有很多人明知这样是错误的，却想做出新挑战)

　　总结：希望这次武汉北大青鸟网络营销课堂能为各位站长们起到真正的帮助，但是想要掌握面的营销策略，还需要进行正规的专业培训，武汉北大青鸟网络营销课随时欢迎你来参加试听课，让你满意的技术讲座!联系电话：17740513250