1. 首页
  2. SEO优化
  3. SEO教程

什么是“蜘蛛陷阱”,它对SEO的影响!

在SEO工作中,SEO人员每天都在与内容和链接打交道,从目前来看,他们深知独立的原创内容,对于未来站点长期发展的重要性,但这一切的开始,都有一个前提,那就是避免产生“蜘蛛陷阱”。  

“蜘蛛陷阱”是什么?  

简单理解:蜘蛛陷阱,是基于站内设计的一种技术策略,用于满足程序的特定需求,但它对搜索引擎并不友好,最大的特点是当蜘蛛抓取某个特定URL的时候,它便进入了无限循环,只有入口,没有出口。  

常见的“蜘蛛陷阱”有哪些:  

1、站内搜索  

这是一个常见且容易造成“蜘蛛陷阱”的地方,当你试图在站内搜索某些特定关键词的时候,如果类似search.php?q=这样的URL地址被搜索引擎抓取与收录,那么很可能产生大量无意义的搜索结果页面。  

解决:你可以通过Robots.txt这个文件,屏蔽动态参数。  

2、电商产品  

如果你以往有过操作电商网站的经历,那么你会遇到产品SKU的多样性的问题,同一个主题内容,会根据SKU的不同,产生多个URL,造成大量的内容重复页面,这也导致严重浪费蜘蛛抓取频率。  

当然,还有一种特殊的“蜘蛛陷阱”与电商产品页面类似,就是动态的内容插入,这也往往导致蜘蛛陷入温柔的陷阱。  

解决:确保URL的规范性,你可以试图利用rel=canonical这个标签来解决类似问题。  

3、Flash网站  

为了满足用户的视觉体验,建站公司通常会使用Flash网站,给用户搭建企业官网,这样看起来非常美观,但由于目前搜索引擎并不能很好的抓取与识别flash内容,往往导致站点排名很难提升。  

解决:不要做整站flash,尽量将flash嵌入网页内容的一部分。  

4、限制性内容  

对于一些站点,出去吸引粉丝的目的,很多内容只有登录才能查看,特别是一些强制cookie的操作,这诱导与欺骗了蜘蛛,它很难识别内容,并且不断的尝试抓取这个URL。  

解决:针对网站建设,尽量避免采用这种策略,去吸引用户。  

5、 强制用Cookies

部分站长为了让用户记住登陆信息,逼迫用户运用Cookies假如未开启,则无法进行拜访,拜访页面显现的也不会正常,这种方法会让蜘蛛无法进行拜访。

6、 Javascript链接


由于JS有许多招引人们眼球的惊人的各种作用,许多站长呢,就用Javascript脚本做一些导航。其实,Javascript相同也是比较严重的蜘蛛圈套之一。

7、 Session ID


假如咱们的网站运用Session ID跟踪用户访问,这样就会呈现一种现象,搜索引擎每一次访问咱们的页面时呈现一个不相同的Session ID,即便拜访的是同一个页面,它也会呈现不相同的ID,可是内容却是相同的,就形成了很多的重复性内容,这也就形成了一个蜘蛛圈套,也不利于网站的优化。那么咱们一般主张咱们运用cookies而不要生成Session ID。

8、各种框架结构

作为一名程序员对框架结构(Frame)在熟悉不过,但框架结构也会对蜘蛛抓取造成致命的伤害。因框架结构对网站页面的维护更新是十分便捷的,所以在之前被广泛应用于网页程序设计,不过现在很少有程序员使用框架结构了,比较重要的原因之一就是框架结构不利于搜索引擎抓取。

如何识别“蜘蛛陷阱”  

对于识别蜘蛛陷阱的方法,特别容易,你只需要通过如下内容:  

① 网站日志:利用工具读取当日蜘蛛抓取URL的内容,如果发现特殊的URL地址,那么值得进一步关注。  

② 抓取频率:查看百度搜索资源平台中抓取频率,如果某一天数值特别大,那么很可能陷入蜘蛛陷阱。  

本文只简单讲述了实际应用中常遇到的蜘蛛陷阱,仅供参考。

原创文章,作者:无言,如若转载,请注明出处:http://www.wy609.com/archives/2019/366.html

发表评论

登录后才能评论

联系我们

1055297669

在线咨询:点击这里给我发消息

邮件:1055297669@qq.com

工作时间:周一至周五,10:30-18:30,节假日休息

QR code