基于servlet并发的日志存储（上）

最新推荐文章于 2022-11-21 14:17:09 发布
最新推荐文章于 2022-11-21 14:17:09 发布
阅读量1.1k 收藏 1
点赞数
分类专栏： java多线程 文章标签： servlet 并发 多线程
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zzq1992126/article/details/49796911
版权

需求：一个功能，接受url形式如：http://localhost:8080/save_log/SaveLog?dir1=dir1&dir2=dir2&dir3=dir3&filename=filename35&content=1
dir就是文件路径，filename是文件名，content是文件内容，把这个请求的内容到对应的路径的文件里，根据url中的参数，将url里的信息保存到文件里，要求可以支持100次/s的存储效率。

由于servlet本身就是并发处理的，因此我们只需要处理好对应的调用函数就可以了。

考虑到对效率有要求，因此使用一个StringBuffer做缓冲区，将数据保存在内存中，然后定时将数据写入文件。基本思路是先将文件名存储在内存中，将url的filename与内存中的filename相比较，如果匹配，则向StringBuffer中写入content内容，如果不匹配，则直接创建文件，写入content内容。使用StringBuffer的length作为判断写入文件的条件。
以下是实现代码

servlet，简单的实现了一个对url的控制，便于测试

package savelog.packagename.com;

import java.io.IOException;
import java.io.PrintWriter;
import javax.servlet.ServletException;
import javax.servlet.annotation.WebServlet;
import javax.servlet.http.HttpServlet;
import javax.servlet.http.HttpServletRequest;
import javax.servlet.http.HttpServletResponse;

/**
 * Servlet implementation class SaveLog
 */
@WebServlet("/SaveLog")
public class SaveLog extends HttpServlet {
    private static final long serialVersionUID = 1L;

    /**
     * @see HttpServlet#HttpServlet()
     */
    public SaveLog() {
        super();
        // TODO Auto-generated constructor stub
    }

    /**
     * @see HttpServlet#doGet(HttpServletRequest request, HttpServletResponse response)
     */
    protected void doGet(HttpServletRequest request, HttpServletResponse response) throws ServletException, IOException {
        // TODO Auto-generated method stub
        request.setCharacterEncoding("UTF-8");
        PrintWriter writer = response.getWriter();
        writer.println("DIR1:"+request.getParameter("dir1"));
        writer.println("DIR2:"+request.getParameter("dir2"));
        writer.println("DIR3:"+request.getParameter("dir3"));
        writer.println("filename:"+request.getParameter("filename"));
        writer.println("content:"+request.getParameter("content"));
        writer.println(request.getCharacterEncoding());

        if(request.getParameter("dir1")==null){
            writer.println("dir1 muxt exist");
            return;
        }

        //String path2=request.getParameter("dir1")+"\\"+request.getParameter("dir2")+"\\"+request.getParameter("dir3");
        StringBuilder path=new StringBuilder();
        path.append(request.getParameter("dir1"));
        if(request.getParameter("dir2")!=null&&!request.getParameter("dir2").equals(""))
            path.append("\\"+request.getParameter("dir2"));
        if(request.getParameter("dir3")!=null&&!request.getParameter("dir3").equals(""))
            path.append("\\"+request.getParameter("dir3"));
        String filename=request.getParameter("filename");
        String temp=request.getParameter("content");
        String content=new String(temp.getBytes("ISO-8859-1"),"UTF-8");
        writer.println("Path:"+path);
        writer.println("savePath:"+Data.saveLog(path.toString(), filename, content));

    }

    /**
     * @see HttpServlet#doPost(HttpServletRequest request, HttpServletResponse response)
     */
    protected void doPost(HttpServletRequest request, HttpServletResponse response) throws ServletException, IOException {
        // TODO Auto-generated method stub
        doGet(request, response);
    }

}

Global类，定义全局变量，保存在内存中。

package savelog.packagename.com;

public class Global {

    /*写日志缓冲区*/
    public static StringBuffer stringBuffer=new StringBuffer();
    /*filename标志*/
    public static String filename=new String("");
    /*根路径*/
    public static final String rootPath = "e:\\logroot";

}

Date类，业务逻辑类，实现了存储的业务逻辑

package savelog.packagename.com;

import java.io.BufferedWriter;
import java.io.File;
import java.io.FileOutputStream;
import java.io.OutputStreamWriter;
import java.text.SimpleDateFormat;
import java.util.Calendar;
import java.util.Date;


public class Data {
    /**
     * 访问方法(同步)
     * @param path
     * @param filename
     * @param content
     * @return
     */
    public static synchronized String saveLog(String path, String filename, String content){
        if(Global.filename.equals("")){
            //第一次访问，创建文件
            Global.filename=filename;
            String savePath=createFile(path,filename,content);
            Global.stringBuffer.setLength(0);
            return savePath;
        }
        if(Global.filename.equals(filename)){
            //追加入已有文件
            Global.stringBuffer.append(getTime()+"\r\n"+content+"\r\n");
            if (Global.stringBuffer.length()>10000) {
                writelog(path, Global.filename, Global.stringBuffer.toString());
                Global.stringBuffer.setLength(0);
            }
            return Global.stringBuffer.toString();
        }else {
            //更换文件名
            if(Global.stringBuffer.length()>0){
                writelog(path, Global.filename, Global.stringBuffer.toString());
                Global.stringBuffer.setLength(0);
            }
            String savePath=createFile(path,filename,content);
            Global.filename=filename;
            return savePath;
        }
    }

    /**
     * 创建新的文件路径，并写入当前 content
     * @param path
     * @throws Throwable 
     */
    private static String createFile(String path,String filename,String content){
        String saveDirPath=Global.rootPath+"\\"+path+"\\"+getDate();
        File Dirs = new File(saveDirPath);
        Dirs.mkdirs();
        String saveFilePath=saveDirPath+"\\"+filename+".log";
        BufferedWriter writer = null; 
        try {
            writer = new BufferedWriter(new OutputStreamWriter(new FileOutputStream(saveFilePath, true),"UTF-8"));
            writer.write(getTime()+"\r\n"+content+"\r\n");   
            writer.close();
        } catch (Exception e) {
            e.printStackTrace();
        }
        return saveFilePath;

    }

    /**
     * 将StringBuffer中的内容写入到file
     * @param path
     * @param content
     */
    private static void writelog(String path,String filename,String content){
        BufferedWriter writer = null; 
        String saveFilePath=Global.rootPath+"\\"+path+"\\"+getDate()+"\\"+filename+".log";
//      处理运行中文件被删除的情况
//      if(!new File(saveFilePath).exists())
//          new File(Global.rootPath+"\\"+path+"\\"+getDate()).mkdirs();
        try {
            writer = new BufferedWriter(new OutputStreamWriter(new FileOutputStream(saveFilePath, true),"UTF-8"));
            writer.write(content);   
            writer.close();
        } catch (Exception e) {
            e.printStackTrace();
        }   
    }

    /**
     * 获得当前日期
     * @return 例：2015-10-11
     */
    private static String getDate(){
        Calendar calendar = Calendar.getInstance();
        int year = calendar.get(Calendar.YEAR);
        int month = calendar.get(Calendar.MONTH);
        int day = calendar.get(Calendar.DAY_OF_MONTH);
        String dateStr = "" + year + "-" + month + "-" + day;
        return dateStr;
    }

    /**
     * 获得当前时间 例：2015-10-11 15:00:01
     * @return
     */
    private static String getTime(){
        SimpleDateFormat simpleDateFormat=new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
        return simpleDateFormat.format(new Date().getTime());
    }

}

并发的处理，简单的处理了并发，使用synchronized关键字处理了saveLog方法，确保每次只有一个线程可以访问该方法，这样就保证了该方法的安全性，避免在多线程的状态下出现不可预期的结果。

性能测试：
使用apache ab进行压力测试，10000次访问的时间是3.2s左右，完全可以满足性能要求。

不足：每次只能处理一个url，如果并发多个url，分布在多个文件中，性能太低，不能满足需求。

独恋幽兰
关注
专栏目录
servlet日志1
DOVEty的专栏
09-23 827
Servlet: Servlet是运行在Web服务器上的Java小程序,也是一个普通java类 作用： 接受页面提交数据 跳转页面   实现方式： 实现servlet接口 继承genericServlet类 继承HttpServlet类   Eg： public class TestServlet extends GenericServlet { @Overrid
Java高并发查看日志_高并发场景下，Java 日志的最佳应用实践
weixin_31427047的博客
02-24 862
日志技术选型Log 门面层选型《阿里巴巴 Java 开发规范》【强制】应用中不可使用日志系统(Log4J、Logback)中的 API，而应依赖使用日志框架 SLF4J 中的 API。使用门面模式的日志框架，有利于维护和各个类的日志处理方式统一。上面所说的是阿里 Java 开发规范中的规则，应用必须使用门面模式的日志框架，首选我们回顾一下门面设计模式。门面模式，又叫外观模式，它为子系统中的一组接口...
Servlet学习日志
yuqu1028的博客
11-21 431
借鉴【狂神说Web】系列
日志管理系统SERVLET SERVLET SERVLET
09-07
刚刚接触java时做的日志管理系统，做的很简单，适合初学着 servlet servlet servlet servlet servlet日志管理系统 servlet servlet servlet servlet servlet日志管理系统 servlet servlet servlet servlet servlet日志管理系统
Servlet实现日志管理
D_Nicolas的博客
08-27 2638
//本文主要实现学员日志管理功能，表单以及前端等样式代码省略，主要servlet方法实现的功能的如下： package com.softeem.dao; import java.util.List; public interface BaseDAO { public boolean save(T t); public boolean delete(T t); public
java servlet 调试日志 logger sae_java servlet 调试日志 lo
weixin_35150962的博客
02-25 221
java servlet 调试日志 lo[2021-02-10 08:32:08]简介:php去除nbsp的方法：首先创建一个PHP代码示例文件；然后通过“preg_replace("/(\s|\&nbsp\;|　|\xc2\xa0)/", " ", strip_tags($val));”方法去除所有nbsp即可。推荐：《PHP视频教云计算docker的日志采集，首先需要了解docke...
手机通讯录备份系统，基于servlet+MySQL实现.zip
最新发布
12-24
6. **错误处理与日志记录**：系统的稳健性体现在对异常情况的处理上，通过记录详细的日志信息，便于排查问题和维护系统稳定性。 7. **性能优化**：考虑并发访问和大数据量处理，可能需要采用缓存技术、数据库连接池...
基于jsp Servlet 的招聘系统.zip
08-22
【基于jsp Servlet 的招聘系统】是一个典型的Web应用项目，它结合了JavaServer Pages（JSP）和Servlet技术，用于构建一套完整的招聘流程管理平台。在Web开发领域，JSP和Servlet是Java EE平台上的核心组件，常用于...
基于servlet + jsp实现的在线考试系统.zip
10-11
【标题】：“基于Servlet + JSP实现的在线考试系统”是一个使用Java Web技术构建的应用程序，它允许用户通过网络进行在线答题。这个系统的核心技术包括Servlet和JSP，两者都是Java服务器端编程的重要组成部分。 ...
java结课设计，一款完全基于servlet的网盘系统.zip
09-10
Java结课设计——基于Servlet的网盘系统是一个典型的Web应用项目，主要展示了如何利用Java Servlet技术构建一个功能完善的在线存储平台。在这个系统中，用户可以上传、下载、管理自己的文件，实现了基本的网盘功能。...
servlet解析演进（5）-添加日志
weixin_34072159的博客
02-02 370
2019独角兽企业重金招聘Python工程师标准>>> ...
使用Servlet获取用户日志
王一兵
10-15 1674
前段时间，实验室需要开发一个用户日志模块，来对实验室的Web项目监控，获取用户的行为日志。个人首先觉得应该主要使用js来实现相关功能，无奈js水平着实太低，最终采用了servlet的方式来实现。项目介绍自己先从github上查询到了一个相关项目，clickstream，我先来介绍一下该项目是怎么实现的。 Clickstream的实现它首先使用了一个Listener来监听ServletContext
jsp/servlet开发日志
iFairStyle的博客
02-23 447
20170115 (个人微博项目)mysql建表字段使用单引号''(会报不知名错误) 一般用反引号而不是单引号，一般在ESC键的下方。   它是为了区分MYSQL的保留字与普通字符而引入的符号。   举个例子：SELECT `select` FROM `test` WHERE select=’字段值’   在test表中，有个select字段，如果不用反引号，MYSQL将把sel
servlet学习日志01
Interest_Soul的博客
04-12 1642
javaweb web开发是基于请求和响应的： 请求：浏览器（客户端）向服务器发送信息 响应：服务器向浏览器回送信息 请求和响应是成对出现的。web资源分类 所谓web资源即放在Internet网上供外界访问的文件或程序，又根据它们呈现的效果及原理不同，将它们划分为静态资源和动态资源。 静态web资源：固定不变数据文件（静态网页 HTML、文本、音频、视频） 静态
基于servlet并发的日志存储（下）
独恋幽兰的专栏
11-12 693
为了解决基于servlet并发的日志存储（上）中提到的，无法满足多个url同时请求的的问题，因此有了这个版本的优化。这个版本重点解决了多个请求生成多个文件的情景。其整体思路为：使用一个ConcurrentHashMap来存储每一个url对应的content，其Key为String类型，存储每一个请求的path，Value为StringBuffer类型，对应存放content的StringBuffer
JavaWeb——Servlet学习日志1
流浪~
12-12 664
Servlet学习日志1Servelet的生命周期 第一阶段：Servlet 通过调用 init () 方法进行初始化。 第二阶段：Servlet 调用 service() 方法来处理客户端的请求。 第三阶段Servlet 通过调用 destroy() 方法终止（结束）。 Serlvet请求 Serlvet请求分为GET和POST方法，这两者具有较大区别，用于不同的场景来处理请求1.Serlvet中
关于servlet的学习日志
weixin_33796205的博客
07-12 88
2019独角兽企业重金招聘Python工程师标准>>> ...
一个用于实现日志查看,修改,删除等操作的Servlet类
shenjilovelive的博客
08-27 578
package com.softeem.servlet; import java.io.IOException; import java.io.OutputStream; import java.io.PrintWriter; import java.net.URLEncoder; import java.util.Date; import java.util.List;
servelet怎么实现日志管理
qq_27277145的博客
04-07 713
servlet中实现日志管理的一种方法 开发工具：eclipse 1、新建javaweb项目 1.1 把日志需要的jar包放入lib下面，log4j-api-2.12.1.jar，log4j-core-2.12.1.jar 1.2在web.xml中配置日志的属性文件 <!-- 配置日志 --> <context-param> <param-nam...
Java Servlet详解：生命周期与并发安全
ServletConfig对象是用来存储与特定Servlet相关的配置信息。它是在Servlet实例化时创建的，包含了在web.xml文件中<servlet>标签下定义的参数。通过`getInitParameter()`方法，Servlet可以获取配置参数，从而灵活地...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值