有些网站的结构不利于蜘蛛爬行,对搜索引擎特别不友好,无法让蜘蛛更好地爬行抓取。我们称之为蜘蛛陷阱。
常见的蜘蛛陷阱分为以下几类:
常见的一个:JavaScript链接
示例:
常见2:在网页中穿插FLASH
常见的三个:会话标识
常见的四种:iframe (iframe)
例子:百度MP3音乐盒
红队称框架结构为百度音乐盒
常见五种:参数过多的动态RUL、RUL
这个URL动态参数太多,不利于搜索引擎进行蜘蛛爬行
常见六:社区和其他需要登录的页面
蜘蛛和人一样,如果需要未经允许访问某些页面,需要登录,但是蜘蛛不会像人一样申请账号登录,所以未经允许不能抓取页面。
做seo的时候避免以上陷阱,让搜索引擎更容易理解你的网站!
文章来源:懒猫seo博客
源地址:/seojs/7084.html