第一，能够获得网站的目录抓取的信息：你的网站日志会对百度蜘蛛的行为会进行自动的记录；第二，分析网站的页面抓取信息；第三，分析网站的状态码信息
图23155-1：
第一，能够获得网站的目录抓取的信息。
当百度蜘蛛到你的网站上爬行收录内容时，你的网站日志会对百度蜘蛛的行为会进行自动的记录，因此只要你去分析网站的日志，你就会发现百度蜘蛛到你的网站上爬取了那些目录，这样你就会了解百度蜘蛛喜好你网站上怎样的内容。另外也可以知道百度蜘蛛是否到那些不会提升网站权重的目录上进行了爬行。因为有的网站内容如注册页面、广告页面以及图标目录等，都不需要让百度去爬行。另外对于网站的数据库也完全不需要被百度蜘蛛爬行。这一方面能够有效的规避百度认为网站是垃圾网站的风险，另一方面也能够提升网站的安全等级。
第二，分析网站的页面抓取信息。
当页面是否被百度蜘蛛抓取都会在网站的日志上显现，这也是我们分析网站的一个重要内容。例如我们的网站页面上是否存在着垃圾页面被抓取，是否存在着多重的URL链接被抓取。同时也可以看出哪些页面经常被抓取，抓取的频度是多少等。通过这些数据你就会清晰的了解，要对一些垃圾页面进行屏蔽，防范因为垃圾页面被抓取过多导致网站被降权。
如果有的页面的内容抓取的频率很高，那么说明这个页面很受百度的青睐，这就意味着我们可以多撰写这样的内容，从而吸引百度的注意，同时也能够有效的提升网站的权重，因为高质量的内容被抓取的越多，就意味着网站的权重会越高，那么优化的效果也就会越佳。
第三，分析网站的状态码信息。
通常状态码主要包括两种，一种是用户状态码，另一种就是蜘蛛状态码。对于蜘蛛状态码这个数据来说，能够可以分析网站是否存在着搜索引擎的抓取问题。如果出现了404，说明是错误页，如果是301或者302，说明是进行了重定向，另外还有504以及500这样的状态码，其中200状态码需要被关注，因为这说明网站存在着一定的风险，如果200状态码出现的数量过多，这必然说明了网站存在着巨大优化风险。
对于用户状态码来说，主要表示的是用户访问网站的情况，这里可以看出用户的关注重点，从而指导站长对这些方向的内容进行优化，从而提升对用户的吸引力，而对于用户不够关注的地方也要分析原因，从而对症下药，进而实现网站综合水平的提升。
转载请注明：网创网 www.netcyw.cn/b23155.html
加油！！！