请输入搜索关键字!

百度蜘蛛只爬首页不爬内页是怎么回事?

游龙模板网(www.crjwz.com) | 2019-07-24 06:56 | 关注:199 我要投稿

摘要: 百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。 其实百度蜘蛛之所以不抓取你的网站有可能就是因为你网...

百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。 

其实百度蜘蛛之所以不抓取你的网站有可能就是因为你网站中有让蜘蛛都不懂的内容存在,那么有哪些是蜘蛛读不懂的内容。很多站长为了网站整体美观和内容丰富,往往喜欢放入大量高质量的图片、动画,并把很多重要的内容都置入这些图片、动画或者脚本上。航太复杂,蜘蛛有时候也会避开。  

首先解决一个问题,怎么知道"百度蜘蛛只爬网站首页不爬内页"?   

蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。   

神马?看不懂IIS日志?   

网上有很多IIS日志分析工具,百度一下。这里推荐使用光年IIS日志分析工具,快速易用。

接下来,南唐给你分析下“百度蜘蛛只爬首页不爬内页”这个问题。

“百度蜘蛛只爬网站的首页不爬内页”原因有如下:  

1、robots.txt,错误操作,屏蔽了内页。  

2、群发等作弊行为。  

3、服务器的原因。  

4、网站首页到内页的链接太少,导航结构混乱,导航不清楚。  

5、网站质量太烂,权重极低。   

6、网站维护的时候三天打鱼两天晒网。

7、网站超级新,新的一塌糊涂。  

8、网站还在百度的沙盒中,百度蜘蛛爬了,也抓取了,没有放页面快照。   

首页能够被百度蜘蛛爬行,说明网站并不是让蜘蛛不屑一顾。  

那肯定就是上面7条原因中的某一条或者N条,导致了“百度蜘蛛只爬网站的首页不爬内页”。   

探讨到此完毕,最后的最后呢,针对上面“百度蜘蛛只爬网站的首页不爬内页”的8条原因,我们一一击破。  

1-8 依次检查网站,逐一排除,逐一解决。  

8大爆破方案如下:  

破1、robots.txt的问题,浏览器输入,查看下,一目了然。  

破2、这个情况,作为网站的维护者最清楚。如果有群发的seo作弊手法,造成百度蜘蛛只爬网站的首页不爬内页”很常见。   

处理方法:  

停止群发的一切seo作弊手法。

有规律并且持续的更新网站内容,网站内容最好原创,次点也要是高质量的伪原创。  

适当的做点外链和友情链接,引引蜘蛛。

这种情况只能淡定的坚持,等。  

破3、可以通过查询“网页http状态码 ”,分析网站返回的代码,判断问题原因。

还有一种情况,与你同IP服务器的网站被百度惩罚,从而牵连到你的网站。  

要么你还淡定的坚持,等。要么换服务器。  

破4、整理网站导航,理顺结构,让网站导航更清晰明了。  

调用文章标题到首页,增加一个“最新文章”、“文章推荐”等版块,增加内页入口。

破5、站内文章垃圾得百度蜘蛛都懒得去爬,你还祈求蜘蛛爬完首页爬内页?  

整理修改已经被百度收录的垃圾内容,清理未被收录的。  

然后坚持有质量、有数量的更新网站内容,同时做好站外链接工作。

破6、月初更新一篇,月末更新一篇,天天抱怨为什么“百度蜘蛛只爬网站的首页不爬内页”。   

省省力气更新几篇文章吧。  

百度蜘蛛像人一样,它本来是1天来一次,你网站没有更新。然后就2天来一次,你的网站依旧没有更新。然后的然后就是5、10、15....

百度蜘蛛也有自己的行为习惯的,虽然它的智能很低级,也不能置之不理。  

破7、作为一个新站就低调点,别天天都纠结“百度蜘蛛只爬网站的首页不爬内页”的问题。  

制定自己的网站优化方案,维护更新管理的网站,切忌使用任何作弊手法。

破9、这个原因很难确定,如果以上原因你的网站都不存在,而你的网站也是“百度蜘蛛只爬网站的首页不爬内页”。  

那么,就可能是还处在百度的沙盒之中。  

这是百度对新网站的考查期,或者是网站被惩罚后的观察期。

淡定面对,积极执行已定的网站优化方案。

两个重要的建议:

1. 在robots的最下面写上网站的地图地址,两个都要写。

参考样式:

Sitemap:  http://www.crjwz.com/sitemap.html

Sitemap:  http://www.crjwz.com/sitemap.xml

2. 新站,自己在发外链的事情,请带上自己网站的地图链接,不说原因,这很重要。

总结:以上就是对“百度蜘蛛每天都来爬取网站,却只收录首页是怎么回事?”的个人解读,希望大家从中能够学到对自己有用的一处或两处。今天就这么滴吧,希望南唐的文章能够帮到你。


精品源码
视觉焦点
网友跟帖

共有 条评论

    推荐文章

    自适应网站与响应式网站有什么区别?

    新网站怎样做SEO优化?

    怎样建营销型网站?都具备什么样的特征

    怎样才能把网站关键词排名做到首页?

    网站做的SEO总没效果是什么原因

    相关文章

    联系我们

    • 游龙模板公众号
      全面掌握电商一手资讯

    • 游龙模板服务号
      精彩活动,推送提醒

    垂询热线:189-5250-0766

    合作投稿:1845609988@qq.com

    扬州市宝应县泰山西路乐意楼

    备案号:苏ICP备15018259号-2