全国统一咨询热线:18609840880

改变目录结构后百度蜘蛛不收录问题

2016-04-12 11:24:29

  比如以前大连网站建设的网页文件全是放在/html/目录下面的,现在改成了每个模块分开一个目录

  1、整站做了301转向

  我天天都有看百度蜘蛛的日志文件,基本大部分都是在爬以前html目录下的东西,日志文件里面也显示被301重定向了,但是新结构里面的大部分栏目页基本都没有被收录,就连主导航栏的栏目页也都没被收录,每天只会有新发表的文章才会收录。这个情况我应该怎么办哟?栏目页不被收录关键词的排名就肯定没有效果吧?能帮忙看看吗?

  2、还有我前天在robots.txt里面阻止了/html/目录的收录,昨天早上的时候网站总收录量直接下降了差不多一半,但是网站首页优化的关键词提升了5个名次,然后看到google站长工具里面提示严重错误,然后昨天下午我又在robots.txt里面开放了html的收录,今天总收录量回来了,但是首页关键词的排名又变回去了。这个排名是真的跟我阻止/html/有关系吗? 还是我自己的心理问题哦?

  做了上面的操作后如果发现百度仍没有收录可能是存在下面的原因:

  1.因为所有的页面我都做了301转向到新的地址上面,所以蜘蛛没感觉到我网站的目录结构变了呢?以为还是原来的网址,所以就不来收录我的栏目页了,只是收录新发的文章?

  2.做了301才几天,还早着呢,301转向在百度起作用需要时间很长。我网站做301一年也没完全起作用。

  不要robots禁止原来页面,不然搜索引擎哪看得到301呢。