宝塔面板下载网站日志,分析百度蜘蛛和谷歌蜘蛛的爬取记录

准备工作:安装好宝塔面板、一个能正常访问的网站、一个在线网站分析工具

1、打开宝塔面板——文件——根目录——www——wwwlogs——域名.log(这个就是网站的日志文件)——选中需要下载的网站日志——更多——下载(这样网站日记就下载好了)

网站日志文件例如:wpa.hefan64.tk.log

其中wpa.hefan64.tk是网站的域名

2、打开网站在线分析工具,这里推荐使用优化之家(网址:https://www.loghao.com/),打开优化之家——蜘蛛访问日志分析——填写网站域名——上传网站日志——开始分析

3、蜘蛛访问日志分析完成后,我们会在下方看到百度蜘蛛、谷歌蜘蛛、搜狗蜘蛛、360蜘蛛等的爬取记录,点击百度蜘蛛,我们会看到详细的蜘蛛抓取时间、蜘蛛IP地址、HTTP状态码等信息。对于网站运营者而言,优化之家是一个非常实用的在线网站分析工具。

4、如果觉得需要下载的网站日志太大,可以对日志进行切割,这样可以避免网站日志文件过大和网站日志文件占用过多磁盘空间的问题。打开宝塔首页——计划任务——填写相关信息——添加任务,例如:

任务类型:日志切割

任务名称:切割日志

执行周期:每星期 周一 1小时

切割日志:选择需要切割日志的网站域名

保留更新࿱

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值