当前位置: > Linux服务器 > apache >

设置Apache日志记录蜘蛛爬行

时间:2015-01-10 13:03来源:linux.it.net.cn 作者:IT
1、打开httpd.conf文件找到以下部分:LogFormat 
“%h %l %u %t \”%r\” %>s %b \”%{Referer}i\” \”%{User-Agent}i\”" combined
 
LogFormat 
“%h %l %u %t \”%r\” %>s %b” common
 
LogFormat 
“%{Referer}i -> %U” referer
 
LogFormat 
“%{User-agent}i” agent
 
具体有关LogFormat的用法请参照:
 
2、接着我们继续向下移动,找到虚拟主机配置段,也就是VirtualHost段,这个是由你自己来配置的。本站的虚拟主机的日志文件是这样设置的:如果你想记录百度蜘蛛的访问全称,就按色部分设置:
 
CustomLog 
/var/html/faq/logs/linux520-access.log combined
 
如果不想记录百度蜘蛛的头部分,则如下设置:
 
CustomLog 
/var/html/faq/logs/linux520-access.log common
 
按照以上设置一下,看看你的日志文件是否发生变化了。
(责任编辑:IT)
------分隔线----------------------------