网络编程基础 (1) -- Socket 通信机制

1. 入门

1. 场景

这里采用最简单的一请求一响应模型为例,假设我们现在需要向 baidu 站点进行通信。我们用 JAVA 原生的 socket 该如何实现。

  1. 建立 socket 连接
    首先,我们需要建立 socket 连接(核心代码)

    import java.net.InetSocketAddress;
    import java.net.Socket;
    import java.net.SocketAddress;
    
    // 初始化 socket
    Socket socket = new Socket();
    // 初始化远程连接地址
    SocketAddress remote = new InetSocketAddress(host, port);
    // 建立连接
    socket.connect(remote);
    
  2. 处理 socket 输入输出流
    成功建立 socket 连接后,我们就能获得它的输入输出流,通信的本质是对输入输出流的处理。通过输入流,读取网络连接上传来的数据,通过输出流,将本地的数据传出给远端。

    socket 连接实际与处理文件流有点类似,都是在进行 IO 操作。

    获取输入、输出流代码如下:

    // 输入流
    InputStream in = socket.getInputStream();
    // 输出流
    OutputStream out = socket.getOutputStream();
    

    关于 IO 流的处理,我们一般会用相应的包装类来处理 IO 流,如果直接处理的话,我们需要对 byte[] 进行操作,而这是相对比较繁琐的。如果采用包装类,我们可以直接以 String、int 等类型进行处理,简化了 IO 字节操作。

    下面以 BufferedReader 与 PrintWriter 作为输入输出的包装类进行处理:

    // 获取 socket 输入流
    private BufferedReader getReader(Socket socket) throws IOException {
        InputStream in = socket.getInputStream();
        return new BufferedReader(new InputStreamReader(in));
    }
    
    // 获取 socket 输出流
    private PrintWriter getWriter(Socket socket) throws IOException {
        OutputStream out = socket.getOutputStream();
        return new PrintWriter(new OutputStreamWriter(out));
    }
    
  3. 数据请求与响应
    有了 socket 连接、IO 输入输出流,下面就该向发送请求数据,以及获取请求的响应结果。

    因为有了 IO 包装类的支持,我们可以直接以字符串的格式进行传输,由包装类帮我们将数据装换成相应的字节流。

    因为我们与 baidu 站点进行的是 HTTP 访问,所有我们不需要额外定义输出格式。采用标准的 HTTP 传输格式,就能进行请求响应了(某些特定的 RPC 框架,可能会有自定义的通信格式)。

    请求的数据内容处理如下:

    class HttpUtil {
    
        public static String compositeRequest(String host){
            return "GET / HTTP/1.1\r\n" +
                    "Host: " + host + "\r\n" +
                    "User-Agent: curl/7.43.0\r\n" +
                    "Accept: */*\r\n\r\n";
        }
    }
    

    发送请求数据代码如下:

    // 发起请求
    PrintWriter writer = getWriter(socket);
    writer.write(HttpUtil.compositeRequest(host));
    writer.flush();
    

    接收响应数据代码如下:

    // 读取响应
    String msg;
    BufferedReader reader = getReader(socket);
    while ((msg = reader.readLine()) != null){
        System.out.println(msg);
    }
    
  4. 测试
    完整代码如下:

    class HttpUtil {
    
        public static String compositeRequest(String host){
            return "GET / HTTP/1.1\r\n" +
                    "Host: " + host + "\r\n" +
                    "User-Agent: curl/7.43.0\r\n" +
                    "Accept: */*\r\n\r\n";
        }
    }
    
    
    class SocketHttpClient {
        public void start(String host, int port) {
            // 初始化 socket
            Socket socket = new Socket();
            try {
                // 设置 socket 连接
                SocketAddress remote = new InetSocketAddress(host, port);
                // socket.setSoTimeout(50000);
                socket.connect(remote);
                // 发起请求
                PrintWriter writer = getWriter(socket);
                System.out.println(HttpUtil.compositeRequest(host));
                writer.write(HttpUtil.compositeRequest(host));
                writer.flush();
                // 读取响应
                String msg;
                BufferedReader reader = getReader(socket);
                while ((msg = reader.readLine()) != null) {
                    System.out.println(msg);
                }
            } catch (IOException e) {
                e.printStackTrace();
            } finally {
                try {
                    socket.close();
                } catch (IOException e) {
                    e.printStackTrace();
                }
            }
        }
    
        private BufferedReader getReader(Socket socket) throws IOException {
            InputStream in = socket.getInputStream();
            return new BufferedReader(new InputStreamReader(in));
        }
    
        private PrintWriter getWriter(Socket socket) throws IOException {
            OutputStream out = socket.getOutputStream();
            return new PrintWriter(new OutputStreamWriter(out));
        }
    }
    

    下面,我们通过实例化一个客户端,来展示 socket 通信的结果:

    class Application {
    
        public static void main(String[] args) {
            new SocketHttpClient().start("www.baidu.com", 80);
        }
    }
    

    结果:

    GET / HTTP/1.1
    Host: www.baidu.com
    User-Agent: curl/7.43.0
    Accept: */*
    
    
    HTTP/1.1 200 OK
    Accept-Ranges: bytes
    Cache-Control: private, no-cache, no-store, proxy-revalidate, no-transform
    Connection: keep-alive
    Content-Length: 2381
    Content-Type: text/html
    Date: Mon, 11 May 2020 06:07:48 GMT
    Etag: "588604dd-94d"
    Last-Modified: Mon, 23 Jan 2017 13:27:57 GMT
    Pragma: no-cache
    Server: bfe/1.0.8.18
    Set-Cookie: BDORZ=27315; max-age=86400; domain=.baidu.com; path=/
    
    //下面是html代码,也就是我们平时登录百度时看到的页面的源码
    <!DOCTYPE html>
    <!--STATUS OK--><html> <head><meta http-equiv=content-type content=text/html;charset=utf-8><meta http-equiv=X-UA-Compatible content=IE=Edge><meta content=always name=referrer><link rel=stylesheet type=text/css href=http://s1.bdstatic.com/r/www/cache/bdorz/baidu.min.css><title>百度一下,你就知道</title></head> <body link=#0000cc> <div id=wrapper> <div id=head> <div class=head_wrapper> <div class=s_form> <div class=s_form_wrapper> <div id=lg> <img hidefocus=true src=//www.baidu.com/img/bd_logo1.png width=270 height=129> </div> <form id=form name=f action=//www.baidu.com/s class=fm> <input type=hidden name=bdorz_come value=1> <input type=hidden name=ie value=utf-8> <input type=hidden name=f value=8> <input type=hidden name=rsv_bp value=1> <input type=hidden name=rsv_idx value=1> <input type=hidden name=tn value=baidu><span class="bg s_ipt_wr"><input id=kw name=wd class=s_ipt value maxlength=255 autocomplete=off autofocus></span><span class="bg s_btn_wr"><input type=submit id=su value=百度一下 class="bg s_btn"></span> </form> </div> </div> <div id=u1> <a href=http://news.baidu.com name=tj_trnews class=mnav>新闻</a> <a href=http://www.hao123.com name=tj_trhao123 class=mnav>hao123</a> <a href=http://map.baidu.com name=tj_trmap class=mnav>地图</a> <a href=http://v.baidu.com name=tj_trvideo class=mnav>视频</a> <a href=http://tieba.baidu.com name=tj_trtieba class=mnav>贴吧</a> <noscript> <a href=http://www.baidu.com/bdorz/login.gif?login&amp;tpl=mn&amp;u=http%3A%2F%2Fwww.baidu.com%2f%3fbdorz_come%3d1 name=tj_login class=lb>登录</a> </noscript> <script>document.write('<a href="http://www.baidu.com/bdorz/login.gif?login&tpl=mn&u='+ encodeURIComponent(window.location.href+ (window.location.search === "" ? "?" : "&")+ "bdorz_come=1")+ '" name="tj_login" class="lb">登录</a>');</script> <a href=//www.baidu.com/more/ name=tj_briicon class=bri style="display: block;">更多产品</a> </div> </div> </div> <div id=ftCon> <div id=ftConw> <p id=lh> <a href=http://home.baidu.com>关于百度</a> <a href=http://ir.baidu.com>About Baidu</a> </p> <p id=cp>&copy;2017&nbsp;Baidu&nbsp;<a href=http://www.baidu.com/duty/>使用百度前必读</a>&nbsp; <a href=http://jianyi.baidu.com/ class=cp-feedback>意见反馈</a>&nbsp;京ICP证030173号&nbsp; <img src=//www.baidu.com/img/gs.gif> </p> </div> </div> </div> </body> </html>
    

2. 请求模型优化

这种方式,虽然实现功能没什么问题。但是我们细看,发现在 IO 写入与读取过程,是发生了 IO 阻塞的情况。即:

// 会发生 IO 阻塞
writer.write(HttpUtil.compositeRequest(host));
reader.readLine();

所以如果要同时请求10个不同的站点,如下:

class SingleThreadApplication {

    public static void main(String[] args) {
        // HttpConstant.HOSTS 为 站点集合
        for (String host: HttpConstant.HOSTS) {

            new SocketHttpClient().start(host, HttpConstant.PORT);
        }
    }
}

它一定是第一个请求响应结束后,才会发起下一个站点处理。这在服务端更明显,虽然这里的代码是客户端连接,但是具体的操作和服务端是差不多的。请求只能一个个串行处理,这在响应时间上肯定不能达标。

  1. 多线程处理
    有人觉得这根本不是问题,JAVA 是多线程的编程语言。对于这种情况,采用多线程的模型再合适不过:

    public class MultiThreadApplication {
        public static void main(String[] args) {
            for (final String host : HttpConstant.HOSTS) {
                Thread t = new Thread(new Runnable() {
                    public void run() {
                        new SocketHttpClient().start(host, HttpConstant.PORT);
                    }
                });
    
                t.start();
            }
        }
    }
    

    这种方式起初看起来挺有用的,但并发量一大,应用会起很多的线程。都知道,在服务器上,每一个线程实际都会占据一个文件句柄。而服务器上的句柄数是有限的,而且大量的线程,造成的线程间切换的消耗也会相当的大。所以这种方式在并发量大的场景下,一定是承载不住的。

  2. 多线程 + 线程池 处理
    既然线程太多不行,那我们控制一下线程创建的数目不就行了。只启动固定的线程数来进行 socket 处理,既利用了多线程的处理,又控制了系统的资源消耗:

    class ThreadPoolApplication {
    
        public static void main(String[] args) {
    
            ExecutorService executorService = Executors.newFixedThreadPool(8);
            for (final String host : HttpConstant.HOSTS) {
    
                Thread t = new Thread(new Runnable() {
                    public void run() {
                        new SocketHttpClient().start(host, HttpConstant.PORT);
                    }
                });
    
                executorService.submit(t);
                new SocketHttpClient().start(host, HttpConstant.PORT);
            }
        }
    }
    

    关于启动的线程数,一般 CPU 密集型会设置在 N+1(N为CPU核数),IO 密集型设置在 2N + 1。

    这种方式,看起来是最优的了。那有没有更好的呢,如果一个线程能同时处理多个 socket 连接,并且在每个 socket 输入输出数据没有准备好的情况下,不进行阻塞,那是不是更优呢。这种技术叫做“IO多路复用”。在 JAVA 的 nio 包中,提供了相应的实现。

3. 补充

1. TCP客户端与服务端的场景

  1. TCP 服务端
    class TCPServer {
        public static void main(String[] args) {
            new Thread(new Runnable() {
                @Override
                public void run() {
                    try {
                        ServerSocket ss = new ServerSocket(1234);
                        System.out.println("启动服务器....");
                        while (true) {
                            Socket s = ss.accept();
                            System.out.println("客户端:" + s.getInetAddress().getLocalHost() + "已连接到服务器");
                            BufferedReader br = new BufferedReader(new InputStreamReader(s.getInputStream()));
                            //读取客户端发送来的消息
                            String mess = br.readLine();
                            System.out.println("客户端:" + mess);
                            BufferedWriter bw = new BufferedWriter(new OutputStreamWriter(s.getOutputStream()));
                            bw.write(mess + "\n");
                            bw.flush();
                        }
                    } catch (IOException e) {
                        e.printStackTrace();
                    }
                }
            }).start();
        }
    }
    
  2. TCP 客户端
    class TCPClient {
        public static void main(String[] args) {
            new Thread(new Runnable() {
                @Override
                public void run() {
                    try {
                        Socket s = new Socket("localhost", 1234);    //构建IO
                        InputStream is = s.getInputStream();
                        OutputStream os = s.getOutputStream();
                        BufferedWriter bw = new BufferedWriter(new OutputStreamWriter(os));
                        //向服务器端发送一条消息
                        bw.write("测试客户端和服务器通信,服务器接收到消息返回到客户端\n");
                        bw.flush();    //读取服务器返回的消息
                        BufferedReader br = new BufferedReader(new InputStreamReader(is));
                        String mess = br.readLine();
                        System.out.println("服务器:" + mess);
                    } catch (UnknownHostException e) {
                        e.printStackTrace();
                    } catch (IOException e) {
                        e.printStackTrace();
                    }
                }
            }).start();
        }
    }
    
  3. 先启动 TCP 服务端,结果如下:
    在这里插入图片描述
    然后启动 TCP 客户端,结果如下:
    在这里插入图片描述
    服务端控制台打印了连接成功的信息:
    在这里插入图片描述

2. UDP客户端和服务端的场景

  1. UDP 服务端
    class UDPServer {
        public static void main(String[] args) {
            new Thread(new Runnable() {
                @Override
                public void run() {
                    try {
                        System.out.println("服务端启动...");
                        DatagramSocket datagramSocket = new DatagramSocket(1234);
                        byte[] buffer = new byte[1024];
                        DatagramPacket packet = new DatagramPacket(buffer, buffer.length);
                        datagramSocket.receive(packet);
                        System.out.println("server recv");
                        String msg = new String(packet.getData(), "utf-8");
                        System.out.println(msg);
                    } catch (SocketException e) {
                        e.printStackTrace();
                    } catch (IOException e) {
                        e.printStackTrace();
                    }
                }
            }).start();
        }
    }
    
  2. UDP 客户端
    class UDPClient {
        public static void main(String[] args) {
            new Thread(new Runnable() {
                @Override
                public void run() {
                    byte[] arr = "Hello Server".getBytes();
                    try {
                        InetAddress inetAddress = InetAddress.getLocalHost();
                        DatagramSocket datagramSocket = new DatagramSocket();
                        DatagramPacket datagramPacket = new DatagramPacket(arr, arr.length, inetAddress, 1234);
                        datagramSocket.send(datagramPacket);
                        System.out.println("send end");
                    } catch (UnknownHostException e) {
                        e.printStackTrace();
                    } catch (SocketException e) {
                        e.printStackTrace();
                    } catch (IOException e) {
                        e.printStackTrace();
                    }
                }
            }).start();
        }
    }
    
  3. 结果:
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值