Apache日志分割/分析

最新推荐文章于 2021-05-12 01:34:06 发布
最新推荐文章于 2021-05-12 01:34:06 发布
阅读量569 收藏
点赞数
分类专栏： apache 文章标签： apache
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45647891/article/details/110196574
版权

Apache日志分割/分析

一.日志分割

1.原因

1.随着网络的访问量的增加，默认情况下Apache的单个日志文件也会越来越大。
2.日志文件占用磁盘空间很大
3.查看相关信息不方便

2.对日志文件进行分割

  Apache自带rotatelogs分割工具实现
  第三方工具cronolog 分割

3.配置日志分割

 vi /etc/httpd.conf
 Errorlog "|/usr/bin/rotatelogs -l logs/www.aa.com_error_%Y%m%d.log 86400" 
  //通过管道把日志文件交给rotatelogs工具 -l指使用本地时间 86400表示日志分割的时间间隔为1天，单位是秒。
 ErrorLog “|/usr/bin/rotatelogs -l logs/www.bc.com-error_%Y%m%d%H.log 7200"    //两个小时
 CustomLog "|/usr/bin/rotatelogs -l logs/www.aa.com_access_%Y%m%d.log 86400"common
 //j将访问日志以一天为间隔进行分割。
 service httpd restart

4.使用cronolog进行日志分割

1.先添加cronolog压缩包，编译安装
tar -zxvf cronolog-1.6.2.tar.gz
cd cronolog-1.6.2
./configure && make && make install
2. 查看路径
which cronolog
3. 定义日志格式
LogFormat "%h %l %u %t \"%r\"%>s %b" common//定义日志的格式
4.进入配置文件替换工具路径
#ErrorLog "logs/error_log"
 ErrorLog "|/usr/local/sbin/cronolog logs/%Y-%m-%d-error_log"
#CustomLog "logs/access_log"  common
 CustomLog "|/usr/local/sbin/cronolog logs/%Y-%m-%d- access_log" common
5.验证
apachectl -t

二.日志分析

1.概述

 1.Perl语言开发的一款开源日志分析系统
 2. 可用来分析Apache、Samba、Vsftpd、LLS等服务器的访问日志
 3.结合crond等计划任务服务，可对日志内容定期进行分析

2.配置

1.手动加载cgi模块

 1.首先验证cg模块
 apachectl -D DUMP_MODULES | grep cgi  //确认加载了cgi模块
 ls /usr/local/httpd/modules/ | grep cgi   //确认是否编译过cgi模块
 2.开启apache的cgi模块
vi /usr/local/httpd/conf/httpd.conf
<IfModule !mpm_prefork_module>
    LoadModule cgid_module modules/mod_cgid.so
</IfModule>
<IfModule mpm_prefork_module>
    LoadModule cgi_module modules/mod_cgi.so
</IfModule>

2.编译安装awstats

tar -zxvf awstats-7.6.tat.gz
mv awstats-7.6 /usr/local/awstats

3.设置Apache服务器域名及hosts域名解析

vi /etc/hosts
192.168.52.11  www.aa.com
grep "ServerName"/etc/httpd.conf//在配置文件中定义主机名为www.aa.com

4.自动执行配置脚本，根据提示回复交互信息

cd /usr/local/awstats/tools
./awstats_configure.pl

5.交互

  /user/local/httpd/conf/httpd.conf       //http配置文件路径
  转换日志格式为combined
  其他选择y然后回车就可以

6.访问日志的网站

http：//192.168.52.11/awstats/awstats.pl?config=www.aa.com
先记录下来，可以通过IP地址访问
service httpd restart    //重启让日志格式生效

7.修改awstats程序主配置文件

vi /etc/awstats/awstats.www.aa.com.conf 
LogFile="/usr/local/httpd/logs/access_log"  //修改日志文件位置，50行
DirData="/var/lib/awstats"  //建立每次抓取的数据存放位置，220行

手动创建抓取数据存放目录
mkdir /var/lib/awstats

8.清空*log

如果之前修改过日志格式需要清空一下
cd /usr/local/httpd/logs
rm -f *log
service httpd restart    /重启

9.添加awstats访问权限

vi /usr/local/httpd/conf/httpd.conf
<Directory "/usr/local/awstats/wwwroot">
Options None
AllowOverride None
Order allow,deny
Allow from all
Require all granted		//添加此配置
</Directory>

10.手动采集

cd /usr/ local/ awstats/ tools  
chmod +x awstats updateall.pl
./awstats_updateall.pl now7   //手动采集一次数据
perl /usr/local/awstats/wwwroot/cgi-bin/awstats.pl -update //日志出错时，重置更新
/usr/local/awstats/tools/awstats_updateall.pl now再次采集
crontab -e

*/5 * * * */usr/local/awstats/tools/awstats_updateall.pl now

11.通过配置页面自动跳转优化页面访问

vi /usr/ local/httpd/htdocs/index.html
<html>
<head>
<meta http-equiv=refresh  content="0;ur1=http://192.168.52.11/awstats/awstats.p1?config=www. aa. com">
</ head>
<body></body></html>

12.打开网址

 http://192.168.52.11/awstats/awstats.pl?config=www.aa.com
DingLiZhe714
关注
专栏目录
Apache日志分割
weixin_44988134的博客
10-25 191
基本概述 随着网站的访问量越来越大，默认情况下Apache服务器产生的单个日志文件也会越来越大，如果不对日志进行分割，那么日志文件占用磁盘空间很大的话势必会将整个日志文件删除，这样会丢失很多网站比较宝贵的信息，而这些日志可以用来进行访问分析、网络安全监察、网络运行状况监控等。另外，服务器遇到故障时，运维人员要打开日志文件进行分析，打开的过程会消耗大量时间。因此管理好这些海量的日志对网站的意义重大。...
Apache构建web虚拟主机、日志分割以及日志分析
自由
08-12 213
一、构建虚拟web主机 1、简介 ①虚拟web主机指的是在同一台服务器中运行多个web站点，其中每一个站点实际上并不独立占用整个服务器，因此被称为“虚拟”Web主机。通过虚拟Web主机服务可以充分利用服务器的硬件资源，从而大大降低网站构建及运行成本。 ②.使用httpd服务可以非常方便地构建虚拟主机服务器，只需要运行一个httpd服务就能够同时支撑大量的web站点 2、web虚拟主机类型 2.1.基于域名 为每个虚拟主机使用不同的域名，但是其对应的IP 地址是相同的。例如，www.aaa.com 和 ww
Apache日志分割脚本
weixin_33896726的博客
05-15 99
【产生背景】随着公司的ntp中心服务器访问越来越大，access日志也是日益增加，原有的日志没有进行切割，单个日志文过大(最大的有3.7G)，若清理磁盘空间会将访问日志整个删除，这样会丢失很多重要的信息，因此对日志进行切割是很有必要的，这样若日后文件过多，也可以删除历史文件。【脚本】#!/bin/bash YESTERDAY=$(date-dyesterday+%Y%...
Apache连接、访问控制与日志管理
weixin_48118868的博客
11-25 467
文章目录1.Apache连接保持1.1Apache连接保持相关参数1.2配置文件配置1.3利用抓包软件测试1.3.1安装fiddler软件1.3.2抓包操作步骤2.Apache访问控制2.1访问控制常用配置参数2.2客户机地址限制操作2.3用户授权限制操作3.日志分割3.1 rotatelogs工具操作3.2 cronolog工具操作4.日志分析4.1配置日志分析4.2打开软件图形化界面查看日志分析 1.Apache连接保持 1.1Apache连接保持相关参数 KeepALIVE： 是否打开连接保持，默认开
Apache日志切割shell脚本
weixin_33762321的博客
04-25 117
Apache、Nginx等web服务器日志量巨大，如果不进行切割的话会导致日志文件过大，不容易清理，而且给日志分析收集工作带来麻烦。下例为Apache日志切割脚本，nginx等其他web服务同样适用代码：#！/bin/bashapache_log_path="/usr/local/apache/logs" #指定日志存储位置log_filenames=`/b...
详解Apache 日志分割教程
11-05 5551
一、日志切割 安装cronolog CentOS 5.3中编译安装Apache日志默认是不切割的，需要用用工具Cronnolog进行日志切割。 1.下载及安装 wget http://cronolog.org/download/cronolog-1.6.2.tar.gz tar zxvf cronolog-1.6.2.tar.gz cd cronol
linux apache 日志分割,企业shell脚本分析及切割apache日志实战荐
weixin_42132359的博客
05-12 209
企业shell脚本分析apache日志实战一，分析apache日志1，有一个文件shell.sh，内容如下：[root@test3root]#catshell.shhttp://www.baidu.com/index.htmlhttp://www.google.com/index.htmlhttp://www.baidu.com/get.htmlhttp://www.baidu.com/set.h...
apache日志分割
04-08
Apache日志分割是管理和分析大型Web服务器日志文件的一种常见方法。Apache，作为最流行的开源Web服务器，会产生大量的访问日志，这些日志记录了所有客户端请求的详细信息。随着时间的推移，单个日志文件可能会变得...
apache使用日志分割模块rotatelogs分割日志详解
01-11
rotatelogs 是 Apache 2.2 中自带的管道日志程序 语法 代码如下:rotatelogs [ -l ] logfile [ rotationtime [ offset ]] | [ filesizeM ] 选项-l使用本地时间代替GMT时间作为时间基准。注意：在一个改变GMT偏移量...
[Linux] apache 日志分割脚本 [ 信息分享,知识分享 ]
叨比叨的博客：提供叨客们分享、交流技术的学习网站！
05-04 645
脚本作用： 分割apache日志文件，按天进行分割。 脚本内容： #!/bin/bash # This script run at 00:00 # The Apache logs path logs_path="/www/wwwlogs" host=`ls -l $logs_path/*-access_log | awk -F " " '{print $9}' | awk -
已经比较简单的日志分割脚本
系统运维
10-30 135
一个比较简单但是比较粗暴的按小时分割日志脚本 #!/bin/bash Y=` date --date="-1 hour" +%Y` m=` date --date="-1 hour" +%m` d=`date --date="-1 hour" +%d` H=`date --date="-1 hour" +%H ` dir=$Y/$m/$d/ #log日志的位置 logdir=/us...
分割apache 的access_log、error_log
weixin_34234721的博客
07-26 106
分割 apache　的access_log: 下载安装cronolog [root@webser1 ~]#wgethttp://cronolog.org/download/cronolog-1.6.2.tar.gz [root@werbser1 ~]# tar xzvf cronolog-1.6.2.tar.gz [root@ werbser1 ~]# cd...
apache日志拆分、分割
博客简介
08-20 1336
由于公司服务器上挂的网站太多，apache访问日志一不小心，就变得超肥（好几个G），不进行日志拆分的话，严重影响网站访问速度和服务器性能（猜的）。没时间解释了，直接上配置： conf/httpd.conf 添加或修改配置：可以先搜索下CustomLog关键词，这里配置的是一天一个日志文件： CustomLog "|bin/rotatelogs logs/access_%Y-%m-%d.log...
最新总结，超实用 Apache Log 分割 So easy
AMimiDou_212
12-12 2234
Apache Log Split-日志分割一、日志文件分割工具1. Apache httpd 自带的日志分割工具（rotatelogs）1. rotatelogs 工具在$HTTP_HOME/bin 目录下，直接修改httpd.conf1）需要apache 加载 log_conf_module，如下：2. 直接修改配置，将log 重定向到rotatelogs 程序按天分割日志：(示例：每隔30s ...
apache的特大日志的分隔脚本
bestlanzi的专栏
07-14 423
工作中遇到了apache的特大日志造成了系统空间大，自己写了一个脚本，解决了日志的分割和删除问题。 #this shell script used to avoid the apache log to grow so big. #Author: Lion Lan At: 2016/7/14 #!/bin/sh #Log's path logPath=/etc/httpd/logs #Log'
apache 日志分割
06-20 300
Window apache 全局设置日志分割 apache [httpd.conf] 配置文件 开启日志模块：LoadModule log_config_module modules/mod_log_config.so ; # 去除前面分号 //找到以下2行 注释第一行 ErrorLog "logs/error.log" ErrorLog "|bin/rotatelogs.exe -l logs/error-%Y-%m-%d.log 2M" #文件2M 大小分割 // 找到以下一行注...
Apache Httpd 日志分割
zhaohp的博客
07-11 399
清除error.log、access.log并限制Apache日志文件大小的方法 最近发现网站打不开，登录系统检查下，发现放置网站文件的瓷盘已被占满，可用空间为0KB，进去发现客户Apache服务器的错误日志error.log非常的大，造成瓷盘被爆满。 第一步：停止Apache服务的所有进程，删除 Apache2/logs/目录下的 error.log、access.log文件 第二步：打开 Apache 的 httpd.conf配置文件并找到下面两条配置 ErrorLog logs/error.log C
Apache访问日志记录用户的每一个请求
banyigmpap71470的专栏
04-22 548
　　我们使用的是/usr/local/apache2.4/conf/extra/httpd-vhosts.conf配置文件下的第二段配置，它的日志在/usr/local/apache2.4/logs/下面 　　#cat /usr/local/apache2.4/logs/111.com-access_log //查看它的日志，GET为不加-I的时候，HEAD为加了-I后的只显示状态...
AWstats安装与使用教程：Apache日志分析
"apache日志分析系统awStats完全教材，涵盖了AWstats在Windows2003/XP环境下的安装教程，包括AWstats的功能演示、下载地址和安装步骤，并提及了cronolog的下载和使用。" Apache日志分析系统AWStats是一款开源的、...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值