一、能够获得网站的目录抓取的信息
当百度搜索引擎蜘蛛到你的网站上爬行抓取内容时，你的网站日志会自动记录下蜘蛛的行为，只要你去分析网站日志，就会发现百度蜘蛛到你的网站上爬取了哪些目录，这样你就能更好地了解百度蜘蛛的喜好。同时，也能知道百度蜘蛛是否到那些不会提升网站权重的目录上进行爬行，因为有的网站内容并不需要让百度去爬行，比如注册页面、广告页面、目标目录等。另外，对于网站的数据库也完全不需要被百度蜘蛛爬行，这样不仅能有效规避百度认为网站是垃圾网站的风险，而且还能提升网站的安全等级。
二、分析网站的页面抓取信息
网站页面是否被百度蜘蛛抓取，是会显现在网站日志上的，这也是我们分析网站的一个重要内容，例如我们的网站页面上是否存在着垃圾页面被抓取，是否存在多重的URL链接被抓取。同时也能看出哪些页面经常被抓取，抓取的频率是多少等。通过这些数据就会知道，哪些垃圾页面是需要屏蔽的，以免垃圾页面被抓取过多，而导致网站被降权。
如果有的页面的内容被抓取的频率很高，那就说明这个页面时受百度请来的，这就意味着我们可以多撰写这样的内容，从而吸引百度的注意，同时也能有效提升网站权重，因为高质量的内容被抓取的越多，网站权重就越高，而优化效果也越好。
三、分析网站的状态码信息
状态码主要包含两种：用户状态码和蜘蛛状态码，对于蜘蛛状态码这个数据来讲，能够分析网站是否存在搜索引擎的抓取问题，如果出现404，说明是错误页，如果是301或者302，那就是重定向，另外还有504和500这样的状态码，其中500状态码是需要特别关注的，因为它意味着网站存在着一定的风险，如果500状态码出现的数量过多，那网站肯定有巨大的优化风险。
而对于用户状态码来讲，主要表示的是用户访问网站的情况，这里可以看出用户的关注重点，从而指导站长对这些方向的内容进行优化，并提升对用户的吸引力，而对于用户不够关注的地方也要分析原因，这样就能对症下药，从而实现网站综合水平的提升。
总结：网站优化一定不要盲目的去优化，而是要通过大量的日志分析，挖掘出网站需要改善的方向，这样才能针对性的去优化，最终达到事半功倍的效果。
