当前位置:seo培训 > SEO技术

什么是“蜘蛛陷阱”,它对SEO的影响!

分类:SEO技术  发布时间: 2015-06-16 20:16:40

  在SEO工作中,SEO员工每天都在处理内容和链接,从目前的角度来看,他们非常了解独立的原始内容,对于未来站点的长期开发的重要性,但是这一切的开始,都有一个前提那是为了避免“蜘蛛陷阱”。

什么是“蜘蛛陷阱”,它对SEO的影响! 第1张

什么是“蜘蛛陷阱”?

  简单理解:蜘蛛陷阱,是基于网站设计的技术策略,用于满足程序的特定需求,但这对搜索引擎并不友好,最大的特点是,当spider抓取特定的URL时,进入无尽的循环,只有入口没有出口。

什么是常见的“蜘蛛陷阱”:  

  1. 搜寻网站

  这是导致“蜘蛛陷阱”的常见且容易的地方,当您尝试在网站中搜索某些关键字时,如果类似于搜索。PHP的?q =此类URL地址被搜索引擎抓取并包含在内,它可能会产生大量无意义的搜索结果页面。

  解决方案:您可以使用robots.txt这个文件,屏蔽动态参数。

  2. 电子商务产品

  如果您曾经有过经营电子商务网站的经验,然后,您将遇到产品SKU多样化的问题,相同的主题内容,根据SKU,生成多个URL,导致大量内容重复页面,这也导致蜘蛛爬行频率的严重浪费。

  当然,还有一个类似于电子商务产品页面的特殊“蜘蛛陷阱”。是动态内容插入,这通常还会导致蜘蛛掉入温和的陷阱。

  解决方案:确保URL的标准化,您可以尝试使用rel = canonical标签来解决类似的问题。

  3. Flash网站

  为了满足用户的视觉体验,网站建设者通常使用Flash网站,为用户建立企业网站,看起来很漂亮然而, 由于当前的搜索引擎无法很好地捕获和识别Flash内容,通常很难提高网站排名。

  解决方案:请勿刷新整个网站,尝试将Flash嵌入为Web内容的一部分。

  4. 受限制的内容

  对于某些网站,外出吸引粉丝的目的,许多内容只能通过登录来查看,特别是一些强制性的Cookie操作,这会诱发并欺骗蜘蛛,内容很难识别,并继续尝试获取此URL。

  解决方案:对于网站建设,尽量避免这种策略,吸引用户。

如何识别“蜘蛛陷阱”  

  对于识别蜘蛛陷阱的方法,特别容易您只需要传递以下内容:

  ①网站日志:使用工具读取当天蜘蛛抓取的URL的内容,如果找到特殊的网址,然后值得进一步关注。

  ②抓取频率:在百度搜索资源平台中查询抓取频率,如果某天的价值特别大,然后它很可能掉入蜘蛛陷阱。

  简介:经常被讨论的蜘蛛陷阱包括网站框架, 会话ID, 和各种跳跃。本文仅简要介绍实际应用中常见的蜘蛛陷阱。仅供参考。