网站优化

SEOer不得不知的蜘蛛陷坑

说到蜘蛛陷坑，可能许多SEO新人都没有听过，什么是蜘蛛？蜘蛛陷坑是阻止蜘蛛爬行网站的障碍物或者说是干扰物，许多蜘蛛陷坑是人为的，也有许多是不小心导致的，既然是蜘蛛陷坑那就是对于蜘蛛的陷坑，对客户是没有影响的，所以可能网页界面看起来非常正常，但里面就有可能存在蜘蛛陷坑。如果消除这些蜘蛛陷坑，能够使蜘蛛更好的在网站内部爬行抓取，现在就来看一下有些SEOer不得不知的蜘蛛陷坑！

1. Flash动画

有的朋友会问，为什么Flash是蜘蛛陷坑的一种，其实这个问题很简易，就是由于蜘蛛辨别不了Flash，许多网站喜爱在主页做一个Flash动画然后再跳向HTML页面，客户能够访问网站看完片头后被转向得真确的HTML网页。但搜索引擎蜘蛛呢？蜘蛛是不能通过这个Flash跟踪到HTML版本页面的。这就是一个陷坑，阻挡了蜘蛛继续抓取网站。如果Flash效益是务必的，木木SEO建议在主页Flash文件之外加上一个通往HTML版本的链接，这样蜘蛛能够跟踪这个链接抓取后面得HTML页面。

2. JS链接

Javascript能够创作出许多吸引人得视觉效益，一些网站喜爱启用Javascript脚本生成导航系统。这也是对照严重得蜘蛛陷坑****。蜘蛛对于js也是辨别不了的，对于js特效能够加入网站，也能够将不需要被抓取的链接放入js，但是需要进行爬行抓取的链接务必不能放入JS，这会导致蜘蛛不能继续爬行，同时js也不要太多，能够专门建一个js文件。

3. 动态URL

我们说现在蜘蛛是能够抓取部分URL链接的，但是动态URL是数据库径直生成的，有的带了问号、等号等多个参数。这类网址不仅不利于搜索引擎蜘蛛爬行，而且还可能导致蜘蛛的死循环，这是一个致命的蜘蛛陷坑。所以大多数情形都是建议大家网址静态化。

4. Session ID

一些网站为了跟踪客户访问启用Session ID，每个客户访问网站时都会生成独特专注得Session ID，也即ID。这个ID都是加在URL中，搜索引擎蜘蛛的每一次访问也会被当成一个新得客户在URL中会加上一个不同的ID，这样蜘蛛每次来访问时所得到的同一个页面会是一个不一样的URL。结果就很明显，这样一来会产生复制内容页面，导致了高度重复的内容页。

5. Frame框架

框架构架对蜘蛛来讲和Flash、js一样都是一道墙，框架构架也会阻碍搜索引擎蜘蛛的爬行和抓取，让蜘蛛掉进陷坑。

6. 要求登录

这个是很常见的，一些网站内容放在需要客户登录之后才能看到得到，设立有的整个网站只能登陆进入后才能看，这对于客户当然没什么，而对于蜘蛛就导致陷坑，为什么？由于蜘蛛不能填写客户名、密码、也不会注册，自然而然，蜘蛛不能进来抓取你的内容，所以除非是VIP内容或者是不需要蜘蛛抓取的内容，其它的应当对蜘蛛公开，这样才能抓取。

7. 强制启用Cookies

一些网站为了实现某种功能、如记住客户登录信息、跟踪客户访问途径等、强制客户启用Cookies、客户浏览器如果没有使用Cookies、页面显示不正常。搜索引擎蜘蛛就相当于一个禁用Cookies得浏览器、强制启用Cookies只能导致搜索引擎蜘蛛无法正常访问

8.种种跳转

目前对照建议的网站跳转就是301、302重定向，而其它跳转，蜘蛛是非常的敏感。由于黑帽Z喜爱用跳转这种手段了，黑了别人的网站，然后在别人的网站上挂上一个指向自己网站的跳转。像js跳转、代码跳转等都不建议大家随意用，特别是如果在做404页面务必要用代码跳转，那建议时间在5秒以上。

9.网站链接构架

对于蜘蛛而言，我们紧要说的就是网站的链接构架，其实网站的链接构架就等于一个房子，链接就是门，而蜘蛛就是我们邀请而来的朋友，网站链接构架槽糕混乱就相当于朋友来到你家后根本就分不清楚东南西北，找不到入口出口。连对应的链接都找不到，蜘蛛怎样进行抓爬？所以链接构架还是需要呈扁平树状构架。