sarg安装与配置

安装环境centos6.4,软件源是6.5的,6.4以前的好像关闭了,害我重新改了源文件。
软件包:sarg-2.3.7有2.4版的,但很多组件要更新,所以不闲麻烦的话就去试试吧。反正我放弃了。。。
下载的直接是压缩包,解压后cd到文件目录,然后configure
./configure --prefix=/usr/local/sarg--enable-bindir=/usr/local/sarg/bin
make
make instal

#安装成功后,在/usr/local/sarg/目录中,有一个配置文件为sarg.conf,我们通过修改配置文件的参数,来达到对日志进行有规则的分析。也可以通过命令行参数实现。
#sarg配置文件的方法和squid配置文件的配置方法类似,只要修改带有关键字的行:
"language english"
  指定网页报告文件的语言类型,很可惜不支持中文网页。
2.3.7 的版本是支持中文的,而且sarg.conf中是看不到language这一关键字项的,直接跳过就好了


"access_log /var/log/squid/access.log"
  指定squid日志文件绝对路径。

"title "squid 使用报告"
  指定网页标题。

"temporary_dir /var/tmp"
  指定临时文件目录,请确认该目录所在的分区足够大先,1g以上。

"output_dir /var/www/html/squid-reports"
  指定网页报告文件输出路径。

"topuser_sort_field connect reverse bytes reverse"
  在top排序中,指定连接次数(connect),访问字节数(bytes)采用降序排列,升序请使用normal替代reverse

"user_sort_field connect reverse"
  对于每个用户的访问纪录,连接次数按降序排列

"exclude_hosts /usr/local/sarg/norecords"
指定不计入排序的站点列表文件名为/usr/local/sarg/norecords,对于客户端访问的这些站点,将不会被top排序中,norecords文件样本:
  google.com
  csdn.net
  microsoft.com


"date_format e"
  启动sarg进程是如果使用日期参数-d时,请使用和配置文件一致的日期格:
   e(europe=dd/mm/yy),
   u(usa=mm/dd/yy),
   w(weekly=yy.ww)

"topuser_fields num date_time userid connect bytes %bytesin-cache-out used_time milisec %time total average"
  指定top排序的域,可以取掉一些不关紧要的域:in-cache-out used_time等

"weekdays 1-5"
  指定top排序星期周期为星期一到星期五,0表示星期天

"hours 9-11,13-16"
  指定top排序的时间周期为9:00-11:59,13:00-16:59,

  至此,sarg.conf文件的配置基本完成了,也可以直接参考附件。

sarg的命令行解释如下:
 sarg -h
 sarg: usage [options...]
 -a hostname or ip address

指定不计入排序的主机名称或地址
 -b useragent log
 用户代理日志文件输出
 -c exclude file
指定不计入排序的站点列表文件名为/usr/local/sarg/norecords,对于客户端访问的这
 些站点,将不会被top排序中
 -d date dd/mm/yyyy-dd/mm/yyyy
 指定日期范围
 -e email address to send reports (stdout forconsole)
 指定报告接收者邮件
 -f config file (/usr/local/sarg/sarg.conf)
 指定配置文件
 -g date format [e=europe ->dd/mm/yy, u=usa -> mm/dd/yy]
 指定输入的日期格式
 -h help (this...)
 列帮助信息
 -i reports by user and ip address
 指定客户端排序采用用户名或者ip地址
 -l input log
 指定squid日志文件绝对路径。
 -o output dir
 指定网页报告文件输出路径,推荐使用webmaster或其他非admin用户运行
 sarg。
 -p use ip address instead userid (reports)
 使用ip地址作为userid域
 -w temporary dir
 指定临时文件目录,请确认该目录所在的分区足够大先,1g以上。

创建输出目录
mkdir /var/www/html/squid-reports/

之后再运行:/usr/local/sarg/sarg  生成报表。就可以通过http://ip/squid-reports打开报表了
其实centos可以直接使用命令sarg的,不需要再带这个命令脚本的文件目录
记得要先安装apache软件。。。。


二,sarg日志分析软件的运行

  一般来说,我们希望系统可以自动生成报告在sarg的主页上可以找到日/月/年的自动生成脚本
sarg -d 日/月/年-日/月/年 #执行sarg的这个命令就可生成你想要的时间段的上网情况

也可以使用crontab来每日自动执行

首先建立执行脚本分为日、周、月三个文件
日报脚本
——————

vi /usr/local/sarg/bin/daily

内容如下:

#!/bin/bash

#Get yesterday date
YESTERDAY=$(date --date "1 day ago" +%d/%m/%Y)
export LC_ALL=zh_CN.utf8(使输出的报表为中文简体字样的报表)
/usr/local/sarg/bin/sarg -o /var/www/html/sarg/daily -d $YESTERDAY> /dev/null2>&1
exit 0

周报脚本
————————

vi /usr/local/sarg/bin/weekly

内容如下:

  #!/bin/bash
  #Generate Access.log for correct weekly reports
  cat /var/log/squid/access.log > /var/log/squid/access.log.week
   #Get yesterday date
  YESTERDAY=$(date --date "1 days ago" +%d/%m/%Y)
   #Get one week ago date
   WEEKAGO=$(date --date "7 days ago" +%d/%m/%Y)
export LC_ALL=zh_CN.utf8
   /usr/local/sarg/bin/sarg -l /var/log/squid/access.log.week -o /var/www/html/squid-reports/weekly -d $WEEKAGO-$YESTERDAY > /dev/null 2>&1
 /usr/sbin/squid -k rotate
 exit 0

月报脚本
——————

vi /usr/local/sarg/bin/monthyl

内容如下:

#!/bin/bash

#Get yesterday date
YESTERDAY=$(date --date "1 day ago" +%d/%m/%Y)

#Get 1 month ago date
MONTHAGO=$(date --date "1 month ago" +%d/%m/%Y)
export LC_ALL=zh_CN.utf8

/usr/local/sarg/bin/sarg -o /var/www/html/squid-reports/monthly -d$MONTHAGO-$YESTERDAY  > /dev/null2>&1

/usr/local/squid/sbin/squid -k rotate

exit 0


然后运行

crontab -e

内容如下:

30 1 * * * /usr/local/sarg/bin/daily
01 0 * * 1 /usr/local/sarg/bin/weekly
01 3 1 * * /usr/local/sarg/bin/monthly

这样在每天都会自动生成一个配置文件来查看

为文件曾加刻执行的权限
chmod 755 /usr/local/sarg/bin/daily
chmod 755 /usr/local/sarg/bin/weekly
chmod 755 /usr/local/sarg/bin/monthly

这一步一定不能忘,不然上面建的脚本就是普通文件,不信可以ls -lF 看看。

最后还得建立一个存放输出记录的目录
mkdir /var/www/html/squid-reports/daily
mkdir /var/www/html/squid-reports/weekly
mkdir /var/www/html/squid-reports/monthly
这个也不能忘,不然你前面的所有功夫都是白费的,因为文件没有输出目录,你也就看不到效果了。

参考来源:http://blog.sina.com.cn/s/blog_6619c04201010kjr.html


附录:我的sarg.conf文件改动的参数
 7 #access_log /usr/local/squid/var/logs/access.log
 8 access_log /var/log/squid/access.log

14 #graphs yes
15 graphs  no


27 #title "Squid User Access Reports"
28 title   "缓存服务器使用报表"

33 #font_face Tahoma,Verdana,Arial
34 font_face       Verdana,Arial

39 #header_color darkblue
40 header_color 00B2EE

46 #header_bgcolor blanchedalmond
47 header_bgcolor #DCDCDC

52 #font_size 9px
53 font_size  12px

58 #header_font_size 9px
59 header_font_size  12px

64 #title_font_size 11px
65 title_font_size 12px

71 # background_color white
72 background_color white

77 #text_color #000000
78 text_color  #000000

83 #text_bgcolor lavender
84 text_bgcolor white

89 #title_color green
90 title_color  green

95 #logo_p_w_picpath none
96 logo_p_w_picpath none

106 #logo_text_color #000000
107 logo_text_color #000000

113 #p_w_picpath_size 80 45
114 p_w_picpath_size 80 45

125 #password none
126 password none

132 #temporary_dir /tmp
133 temporary_dir /tmp

139 #output_dir /var/www/html/squid-reports
140 output_dir /var/www/html/squid-reports

157 #output_email none
158 output_email none

附赠小技巧,sarg的那个log图标是可以换的,先find / -name sarg.png记录输出结果的目录,然后找一个自己想要log的重命名为sarg.png替换掉find目中的图片


如果出现crontab中的日周月报表不自动生成的情况就用下面的操作

cp -p  /usr/local/sarg/bin/daily  /etc/cron.daily/
cp -p  /usr/local/sarg/bin/weekly  /etc/cron.weekly/
cp -p  /usr/local/sarg/bin/monthly  /etc/cron.monthly/
不知道其他人遇到过没有,我遇到了,所以这里就直接把脚本拷贝到系统自带的文件夹中

然后更改crontab内容
crontab -e
内容如下:
30 1 * * *   /etc/cron.daily//daily
1   0 * * 1 /etc/cron.weekly/weekly
1   3 1 * * /etc/cron.monthly/monthly