设置Apache日志记录蜘蛛爬行

1、打开httpd.conf文件找到以下部分：LogFormat %h %l %u %t \%r\ %s %b \%{Referer}i\ \%{User-Agent}i\ combined LogFormat %h %l %u %t \%r\ %s %b common LogFormat %{Referer}i - %U referer LogFormat %{User-agent}i agent 具体有关LogFormat的用法请...

让Apache拒绝网络流氓蜘蛛

一旦网站对外开放，并登陆到搜索引擎中，网络蜘蛛会定期来光顾采集。 当一个网络蜘蛛(有的叫搜索机器人)访问一个站点时，它会首先检查该站点根目录下是否存在robots.txt，如果存在，搜索机器人就会按照该文件中的内容来确定访问的范围；如果该文件不存在，那...

apache日志只记录Baidu蜘蛛的记录

Apache默认的日志记录方式： LogFormat %h %l %u %t \%r\ %s %b common 记录到的如下： 61.135.168.14 - - [22/Oct/2008:22:13:11 +0800] GET / HTTP/1.1 200 8427 Apache还有个较复杂的combined的日志记录方式，如下： LogFormat %h %l %u %t \%r\ %s %b \%...

如何更改linux(centos)下的Apache http端口号

# vi /etc/httpd/conf/httpd.conf 文件 修改两个地方 #Listen 12.34.56.78:80 Listen 80 #把80改为你设置的端口，我设置端口为82 Listen 82 NameVirtualHost *:80 #把80改为你设置的端口，我设置端口为82 NameVirtualHost *:82 保存修改，退出。 //如果没有s...

CentOS服务器下让Apache2支持中文URL

有些客户用了我们带apache的系统模板后无法支持中文URL,今天以我们带apache的系统模板为例，简单的说一下如何让Apache2支持中文URL。 测试环境： centos5.5+apache2+mod_encoding 第一步：下载文件解压 12 wget http : //www.vpsyou.com/sources/mod_encodin...

apache error.log日志文件太大怎么办?

apache错误日志文件增长太快，导致error.log日志文件太大，日益增长的日志文件如果不做处理会引起性能下降，这里分享下解决方法。 使用apache的朋友，是否曾遇到过日志文件太大的问题，可以参考下这里清除error.log、access.log并限制Apache日志文件大小的方...

解决apache日志文件太大问题(按天分割apache日志)

如何解决apache日志文件太大的问题，可以按天分割apache日志文件，在httpd.conf完成日志文件切割选项的配置就可以。 遇到apache日志文件太大的问题，apache日志增长过快，如果没有一个好的清理策略，用不了多长时间，日志文件就会超出磁盘空间限制了。 可以考...

如何配置apache一个ip多域名的虚拟主机？

这个必须要有，不然不能运行虚拟主机 NameVirtualHost *:80 然后设置： VirtualHost *:80 DirectoryIndex default.php ServerName www.host1.com DocumentRoot D:/wwwroot/host1/ ErrorLog H:/log/host1.log TransferLog H:/log/host1access.log /VirtualHost...

解决apache 文件夹下 logs 错误日志文件过大的问题

apache用久了，就会发现在logs文件夹下面 error.log 和 access.log 这两个文件就会超过1个G了，占用太多的磁盘空间，直接删除也没用，还会再生成这么大的文件。 其实只需更改一个httpd.conf里的配置信息就可以解决这个问题了。 修改如下： 将 LogLevelwarn...

解决apache日志文件太大的方法

httpd.conf中CustomLog logs/access.log common 改成 httpd.conf中CustomLog logs/access.log common 改成 CustomLog |c:/apache/bin/rotatelogs.exe c:/apache/logs/access_%Y_%m_%d.log 86400 common 其中把c:改成你安装apache所在的路径. 重启Apache 其中...