当前位置:雅虎网站目录 » 站长资讯 » 站长资讯 » 搜索引擎 » 文章详细

网站建好后的7个蜘蛛陷阱

来源:站长分类目录 浏览:549次 时间:2014-10-14
在SEO工作中,网页被收录是基础工作,但对于搜索引擎来讲,极少情况会100%收录你网站的所有网页,搜索引擎的爬虫程序设计的再精巧,也难以逾越所谓的蜘蛛陷阱(蜘蛛陷进)。

蜘蛛陷阱是组织蜘蛛程序爬行网站的障碍物,通常是那些显示网页的技术方法,目前很多浏览器在设计的时候考虑过这些因素,所以可能网页界面看起来非常正常,但这些蜘蛛陷阱会对蜘蛛程序赞成障碍,如果消除这些蜘蛛陷阱,可以是蜘蛛程序收录更多的网页。

很对蜘蛛陷阱都是先进的技术方法,开发成本相对也较大,但是这些的确会影响搜索引擎对你网站的了解,甚至还可能被整个网站都不被搜索引擎收录,那么,当务之急,是消除这些蜘蛛陷阱,让搜索引擎收录你的更多网页,这才将有利于你的SEM营销计划的开展。
一、注意robots文件正确书写

robots.txt 文件看似一个简单的文本文件,放在网站的根目录下面,但它可以告诉搜索引擎的蜘蛛程序在服务器上的那些文件是可以被查看的,那些文件是私人文件将不被查看。

1、User agent(用户代理):User agent 定义了下面的禁止命令使用于那个蜘蛛程序,如果对 User agent 定义为星号(*),则表示针对所有的蜘蛛程序。
2、Disallow(禁止):禁止指明了具体那个文件蜘蛛程序不能查看,可以指定精确的文件名或者任意文件,甚至是目录名的一部分。
意外的失误对网站带来的影响很普遍,在网站上线之前可能会对整个网站暂时屏蔽,但上线以后往往忙于其他事情而忘记该文件的更正,导致网站不能正常被搜索引擎收录。

除了robots.txt文件外,还应该注意元标记也可能会导致同样的问题,但这类情况往往很少。
二、消除弹窗

虽然弹窗(弹出窗口)很吸引眼球,但大多数用户都不喜欢它,因为这些“小广告”是强制展示给用户的,可能用户正在认真浏览他感兴趣的信息,这时候弹到用户面前,感受可想而知。

如果使用弹窗来显示一些补充和重要内容,最好在网站地图或者其他正常网页上给这些页面做上链接,不然可能或导致这些页面的无法正常收录。
三、避免使用JS下拉菜单

蜘蛛程序对JS的理解还不深入,一些在JS存在的链接可能无法被蜘蛛程序捕捉到,而往往菜单中的链接又是很重要的,所以使用JS下拉菜单的网页最好使用html重新这些链接。

除了用html代码,还可以使用

推荐站点

  • 纸质化妆盒厂家纸质化妆盒厂家

    纸质化妆盒、又叫纸质眼影盒、纸质腮红盒、眼影纸本、手工眼影本、眼影书本等叫法、纸质化妆品盒有以下优势。。。1、纸质眼影盒特点,产品多元化:工艺纸盒具有重量轻、品种多样化的特点。不像注塑的产品由于磨具限制的原因,款式形状单一。2、环保优势:纸质眼影盒内外选用的均是纸质的环保材料,具有可回收、可降解等特点,相比现有的眼影盒通过注塑成型,更加环保,可有效防止环境的污染和破坏不但可以重复利用,还可以用废弃的纸包装制品造肥。3、技术优势:纸包装材料伸缩性小,不受热和光的影响,具有更好的稳定性;纸的不透明性,能够提供隐蔽隔离,使某些产品不能从包装外部看到,满足了某些产品的包装需要。工艺纸盒还具有良好的透气性、柔软性、强度及可控的撕裂性能;使产品有很好的弹性和韧性,可以对被包装物提供一定的保护作用。

    www.f58f.com
  • 大中华电子商务网大中华电子商务网

    大中华电子商务网免费发布不限制条数,大中华电子商务网是一个可以免费发布分类信息的B2B平台。可免费发布您的产品信息!便捷免费的B2B供求信息发布平台

    www.greatercnb2b.com
  • 大中国商业信息网大中国商业信息网

    大中国商业信息网免费发布不限制条数,大中国商业信息网是一个可以免费发布分类信息的B2B平台。可免费发布您的产品信息!便捷免费的B2B供求信息发布平台

    www.greatcnb2b.com
  • 全球商务信息网全球商务信息网

    欢迎访问全球商务信息网,这里有各行业信息网/B2B电子商务网站,是最方便的免费网络推广平台,已成为无数商家网络营销/网络推广的首选网站

    www.globalb2bcn.com
  • 国际电子商务网国际电子商务网

    欢迎访问国际电子商务网,这里有各行业信息网/B2B电子商务网站,是最方便的免费网络推广平台,已成为无数商家网络营销/网络推广的首选网站

    www.intbtb.com