服务器网站访问日志分析,服务器日志分析与流量统计_直观快捷分析每个网站的日志...

本帖最后由 软程科技 于 2019-9-9 19:13 编辑

应用名称：日志分析与流量统计

价格：1元

作者：软程科技

版本: 2.1.9

提示(使用前必读):

1. 此插件未在超大(超过1G)的日志文件上测试过, 大日志用户慎用.

2. 日志量大的用户推荐使用数据库模式, 每隔5~10分钟将日志转存到数据库中, 在数据库中读取日志记录效率要高很多.

3. 使用数据库模式之前, 请将之前的日志备份,然后使用官方的系统工具中"日志清理工具"清空日志.3. 数据库模式下,每次同步完成会将日志文件的内容清空,尽量保持日志文件最小化,提升同步效率, 对此功能不接受的请慎用此模式.

常见问题解决办法:一. 安装插件之后没有数据问题排查:

1. 检查有没有设置同步的计划任务;

2. 检查是否更新到版本 2.1.7以上 ,如果在软件列表没有看到版本更新, 点击软件列表右上角的"更新软件列表"按钮即可看到版本更新;

3. 执行一下同步日志, 查看同步日志中是否有报错信息, 如果没有报错信息,但同步数量为0条, 则可能是网站没有开启日志记录;

4. 如果网站配置中已开启日志记录,但仍未有日志, 重启一下nginx或者apache服务,然后再执一下同步日志的计任任务,看看是否已有记录;

5. 以上4步都无法解决问题, 请加我QQ: 511561588, (备注: 服务器日志分析插件)

二. 插件使用一段时间之后, 打开非常慢 (以下方法只能算是一个临时办法,没办法治本):*流量大的网站打开插件分析访问慢, 这个问题暂时没更好的办法解决, 现在sqlite的查询效率确实有点慢,建议使用mysql试试

在插件的"设置"中重新设置一个新的数据库文件

QQ20190909-190543@2x.png (228.25 KB, 下载次数: 644)

2019-9-9 19:06 上传

三. 使用CDN之后不显示真实IP解决方法:

以下方法我自己没有试过, 不过根据其它朋友反馈是有效的.

解决方法: https://rcwap.com/newsdetail_135.html

功能介绍：

1. 统计服务器上每个网站的流量, IP访问量, IP流量等数据;

2. 对异常IP一键拉黑 (加入防火墙黑名单),可在面板防火墙中查看并删除;

3. 根据天/周/月/自定义时间统计并绘制出流量及访问量趋势图表

4. 根据IP访问量排序, 访问量最高的IP排在前面;

5. 根据网站页面流量排序, 网站中流量最大的页面排在前面;

6. 日志原始数据解析, 将日志中的数据分割成表格, 并且支持根据IP和页面关键词筛选记录;

7. 数据库模式, 通过面板的"计划任务"功能,定时将日志转存到面板自带的数据库中, 然后从数据库中解析日志, 提升解析效率.版本2.1.8 更新:

1. 修复了部分由于日志格式造成的同步报错;2. IP统计选项卡中新增了 "拉黑" 功能

支持版本：

Centos6到Centos7  全版本(64位系统)，Ubuntu 16.04  到 Ubuntu 18.04 全版本(64位系统)

安装方法：

在第三方插件列表中可以找到

数据库模式日志同步设置步骤:

1. 面板"计划任务";

2. 任务类型选择"Shell脚本"

3. 任务名称自己随便定

4. 执行周期: 建议选择"N分钟" (代表每N分钟执行一次),

流量小的服务器可以设置每30分钟执行一次;

流量大的服务器可以设置每5分钟执行一次;

5. 脚本内容:

python /www/server/panel/plugin/liuliangtongji/sync.py复制代码

把上面脚本复制进去即可

6. 点击"添加任务"按钮保存.

010.png (308.19 KB, 下载次数: 790)

2019-5-30 09:40 上传

定时自动清理日志设置步骤:

1. 面板"计划任务";

2. 任务类型选择"Shell脚本"

3. 任务名称自己随便定

4. 执行周期: 建议选择"每天" (代表每天指定时间执行一次),

建议每天 0 点 1分执行

5. 脚本内容:

python /www/server/panel/plugin/liuliangtongji/cleanlog.py复制代码把上面脚本复制进去即可6. 点击"添加任务"按钮保存.

插件界面及功能介绍:

1. 欢迎界面(新增) : 用户选择解析模式,

文件模式: 直接读取服务器日志文件解析,当日志文件很大时,可能会造成面板卡死;

数据库模式: 利用面板的"计划任务"功能,定时将日志转存到面板自带的数据库中, 然后从数据库中读取数据解析.

000.png (216.37 KB, 下载次数: 750)

2019-5-30 09:40 上传

2. 主界面 (概况): 主要用于统计指定站点, 在某段时间区间内的流量及IP访问情况, 可以一键拉黑异常IP

001.png (364.26 KB, 下载次数: 834)

2019-5-28 11:27 上传

3. 流量趋势图:  昨天/今天是以小时为单位统计, 超过1天的时间间区都是以天为单位统计

002.png (183.7 KB, 下载次数: 778)

2019-5-28 11:30 上传

4. IP统计: 统计指定站点在某个时间段内的访问IP列表, 按照访问的流量最大到小排序

003.png (346.3 KB, 下载次数: 793)

2019-5-28 11:32 上传

5. 页面URL统计:  统计指定站点在某个时间区间内流量最大的页面, 此功能有助于优化网站页面

004.png (393.64 KB, 下载次数: 832)

2019-5-28 11:34 上传

6. 日志原始明细: 将日志数据解析成表格, 更直观查询日志, 同时支持根据IP或访问URL筛选记录

1559014617087.jpg (339.15 KB, 下载次数: 811)

2019-5-28 11:37 上传

关于此插件有任何建议, 欢迎留言讨论!!!!