当前位置:优站分类目录 » 站长资讯 » 网站运营 » 文章详细

不要给蜘蛛设下陷阱

来源:本站原创 时间:2014-06-28目录:网站运营浏览:1763次 
一号坑:flash
部分网站首页就是一个大大的flash,一打开网站确实比较绚丽,有没有想过,html代码只有一个链向flash文件的链接,没有其他文字内容,蜘蛛会不会抓取?还有,部分网站的首页banner上也有flash,且添加了活动链接,虽然用户能直接看到活动内容,蜘蛛无法识别,有何用?

二号坑:sission ID
有些网站会使用sission ID来跟踪用户访问,每个用户的访问就会生成一个唯一的sission ID,连带着蜘蛛的访问也会被当成新用户,url上又记录了一个不同的sission ID。搜索引擎每次都会得到一个不同的url,您觉得,这事儿靠谱不?

三号坑:各种跳转
除了301跳转外,搜索引擎蜘蛛对跳转可是非常敏感的,比如java script跳转、302跳转等等。对于必须要转向的,推荐大家使用靠谱的301转向。对于其它转向,不到万不得已,最好不要使用,对蜘蛛爬行不利。

四号坑:框架结构
网站建设发展初期,大家都比较喜欢使用框架结构设计页面,如今,很少站长会使用它了,因为它不利于蜘蛛的抓取。

五号坑:动态url
动态url值是数据库驱动网站所生成的、带有问号、等号等特殊符号的网址。众所周知,动态url是非常不利于搜索引擎蜘蛛爬行的,即使百度能够识别,但并不能保证每次都能识别出来。