重庆网站优化页面抓取调整方案

  网站优化页面抓取调整方案

  屏蔽一搜和宜搜搜索引擎抓取

  搜蜘蛛: YisouSpider。

  宜搜蜘蛛: EasouSpider。

  一、屏蔽栏目抓取

  (1)屏蔽栏目URL为数字的URL抓取。

  如0、181等栏目都需要屏蔽,具体有哪些,还请技术人员在网站数据库中查询。

  (2)屏蔽 soldout/栏目抓取

  通过后台查询,发现这类URL带来的搜索流量很少,占用的蜘蛛抓取过多,所以屏蔽。

  3.404页面提交

  针对www页面的404更新到现有的404页面sitemap中,并在百度站长工具中的死链提交手动更新。

  二、list页面,屏蔽一搜和宜搜搜索引擎抓取

  一搜蜘蛛: YisouSpider.

  宜搜蜘蛛: EasouSpider.

  2.404页面提交

  针对list页面的404更新到现有的404页面 sitemap中,并在百度站长工具中的死链提交手动更新。

  三、Item页面

  屏蔽一搜和宜搜搜索引擎抓取

  搜蜘蛛: YisouSpider

  宜搜蜘蛛: EasouSpider

  2.屏蔽栏目抓取

  屏蔽栏目 /recommend Cache/、/ uploads/old_pi

  3.404页面提交

  针对tem页面的404更新到现有的404页面 sitemap中,并在百度站长工具中的死链提交手动更新。接着一周内出了《 robots方案》《链接创建规则》《寺库网网址带参数问题解决建议》《寺库网首页网页加载速度提升解决方案》。方案一定要做成傻瓜手册,尤其是技术部门,为了保证不犯错,最简单的就是复制粘贴,你的方案最好不要让人有过多的思考,如果不能做到这个地步,至少要让技术人员一眼就明白说的是什么问题。


关键字词重庆网站优化



内容版权声明:除非注明,否则皆为重庆SEO原创文章,公司提供dede织梦仿站以及SEO优化服务。

转载注明出处:http://www.ruheseo.com/zxinfo/1271.html