1. 「柴叔SEO」首页
  2. SEO顾问

中国SEO软件下载 SEOer必须知道蜘蛛陷阱

seo2.jpg中文seo软件下载1. Flash动画

有些朋友会问为什么Flash是一种蜘蛛陷阱。实际上,这个问题很简单。由于蜘蛛无法识别Flash,许多网站都喜欢在主页上制作Flash动画,然后跳转到HTML页面。用户可以访问该网站。标题转到真正的HTML页面后。但是搜索引擎蜘蛛呢?蜘蛛无法通过此Flash跟踪此页面的HTML版本。这是一个阻止蜘蛛继续抓取网站的陷阱。如果需要Flash效果,除了Home Flash文件外,建议添加HTML版本的链接,以便蜘蛛可以跟踪链接以获取HTML页面。

2. JS链接

Javascript可以创建很多有吸引力的视觉效果,有些网站喜欢使用Javascript脚本来生成导航系统。这也是一个相对严重的蜘蛛陷阱。蜘蛛无法识别js。对于js效果,您可以加入该网站。您还可以将不需要爬网的链接放入js,但不能将需要爬网的链接放入JS中。这将导致蜘蛛停止爬行。同时,js不是太多,你可以建立一个js文件。

3. 动态URL

我们说蜘蛛现在可以抓取一些URL链接,但动态URL是由数据库直接生成的,有些还有多个参数,如问号和等号。这种类型的URL不仅对搜索引擎蜘蛛不利,而且还会导致蜘蛛死亡,这是一个致命的蜘蛛陷阱。因此,在大多数情况下,建议每个网址都是静态的。

4. Session ID

某些网站使用会话ID来跟踪用户访问。每个用户访问该网站以生成唯一聚焦的会话ID,即ID。此ID已添加到URL中,搜索引擎蜘蛛的每次访问都将被视为URL中具有不同ID的新用户,因此每次访问时蜘蛛获取的页面将是不同的URL。结果很明显,导致重复的内容页面,导致高度重复的内容页面。

5. Frame框架

框架结构是用于蜘蛛的墙壁,如Flash和js。框架结构还将阻碍搜索引擎蜘蛛的爬行和爬行,并让蜘蛛落入陷阱。

6. 要求登录

这很常见。有些网站只能在用户需要登录后才能看到。整个网站只能在登录后查看。这当然对用户没什么影响,但它是蜘蛛的陷阱。为什么?由于蜘蛛无法填写用户名,密码和注册信息,蜘蛛自然无法进入并抓取您的内容,因此除非VIP内容或内容不需要蜘蛛抓取,否则另一个应该暴露给蜘蛛蜘蛛让你可以抓住。

7. 强制使用Cookies

某些网站使用某些功能,例如记住用户登录信息,跟踪用户访问路径等,迫使用户使用cookie,如果用户浏览器未启用cookie,则页面显示不正常。搜索引擎蜘蛛相当于禁用cookie的浏览器。强制使用cookie只会导致搜索引擎蜘蛛无法访问。

8.各种跳转

目前,推荐网站跳转为301,302重定向,而其他跳转,蜘蛛则非常敏感。因为Black Hat Z喜欢使用跳转方法,将其他人的网站涂黑,然后在别人的网站上跳转指向他们的网站。像js跳转,代码跳转等不建议随便使用,特别是如果你在做404页时必须使用代码跳转,那么建议的时间超过5秒。

9.网站链接结构

对于蜘蛛,我们主要谈论网站的链接结构。事实上,网站的链接结构等于房子,链接是门,蜘蛛是我们邀请的朋友。网站的链接结构相当于朋友。到达你的家后,你无法区分东南和西北之间的区别。你找不到入口和出口。即使找不到相应的链接,蜘蛛如何爬行?因此,链接结构仍然需要具有扁平树结构。

原创文章,作者:柴叔seo,如若转载,请注明出处:https://www.cxta.com/10198.html

发表评论

登录后才能评论

联系我们

QQ:86345

在线咨询:点击这里给我发消息

邮件:86345@qq.com

工作时间:周一至周五,9:30-18:30,节假日休息

QR code