ThreadGroup其实比ExecutorService更好

用java做抓取的时候免不了要用到多线程的了,因为要同时抓取多个网站或一条线程抓取一个网站的话实在太慢,而且有时一条线程抓取同一个网站的话也比较浪费CPU资源。要用到多线程的等方面,也就免不了对线程的控制或用到线程池。 我在做我们现在的那一个抓取框架的时候,就曾经用过java.util.concurrent.ExecutorService作为线程池,关于ExecutorService的使用代码大概如下:

java.util.concurrent.Executors类的API提供大量创建连接池的静态方法:1.固定大小的线程池:

1 package BackStage;
2
3 import java.util.concurrent.Executors;
4 import java.util.concurrent.ExecutorService;
5
6 public class JavaThreadPool {
7 public static void main(String[] args) {
8 // 创建一个可重用固定线程数的线程池
9 ExecutorService pool = Executors.newFixedThreadPool(2);
10 // 创建实现了Runnable接口对象,Thread对象当然也实现了Runnable接口
11 Thread t1 = new MyThread();
12 Thread t2 = new MyThread();
13 Thread t3 = new MyThread();
14 Thread t4 = new MyThread();
15 Thread t5 = new MyThread();
16 // 将线程放入池中进行执行
17 pool.execute(t1);
18 pool.execute(t2);
19 pool.execute(t3);
20 pool.execute(t4);
21 pool.execute(t5);
22 // 关闭线程池
23 pool.shutdown();
24 }
25 }
26
27 class MyThread extends Thread {
28 @Override
29 public void run() {
30 System.out.println(Thread.currentThread().getName() + "正在执行。。。");
31 }
32 }

后来发现ExecutorService的功能没有想像中的那么好,而且最多只是提供一个线程的容器而然,所以后来我用改用了java.lang.ThreadGroup,ThreadGroup有很多优势,最重要的一点就是它可以对线程进行遍历,知道那些线程已经运行完毕,还有那些线程在运行。关于ThreadGroup的使用代码如下:

1 class MyThread extends Thread {
2 boolean stopped;
3
4 MyThread(ThreadGroup tg, String name) {
5 super(tg, name);
6 stopped = false;
7 }
8
9 public void run() {
10 System.out.println(Thread.currentThread().getName() + " starting.");
11 try {
12 for (int i = 1; i < 1000; i++) {
13 System.out.print(".");
14 Thread.sleep(250);
15 synchronized (this) {
16 if (stopped)
17 break;
18 }
19 }
20 } catch (Exception exc) {
21 System.out.println(Thread.currentThread().getName() + " interrupted.");
22 }
23 System.out.println(Thread.currentThread().getName() + " exiting.");
24 }
25
26 synchronized void myStop() {
27 stopped = true;
28 }
29 }
30
31 public class Main {
32 public static void main(String args[]) throws Exception {
33 ThreadGroup tg = new ThreadGroup("My Group");
34
35 MyThread thrd = new MyThread(tg, "MyThread #1");
36 MyThread thrd2 = new MyThread(tg, "MyThread #2");
37 MyThread thrd3 = new MyThread(tg, "MyThread #3");
38
39 thrd.start();
40 thrd2.start();
41 thrd3.start();
42
43 Thread.sleep(1000);
44
45 System.out.println(tg.activeCount() + " threads in thread group.");
46
47 Thread thrds[] = new Thread[tg.activeCount()];
48 tg.enumerate(thrds);
49 for (Thread t : thrds)
50 System.out.println(t.getName());
51
52 thrd.myStop();
53
54 Thread.sleep(1000);
55
56 System.out.println(tg.activeCount() + " threads in tg.");
57 tg.interrupt();
58 }
59 }

由以上的代码可以看出:ThreadGroup比ExecutorService多以下几个优势

1.ThreadGroup可以遍历线程,知道那些线程已经运行完毕,那些还在运行

2.可以通过ThreadGroup.activeCount知道有多少线程从而可以控制插入的线程数


转载地址:http://www.cnblogs.com/jimmy0756/archive/2011/04/18/2019439.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
这段代码使用了Netty框架来启动一个服务器并绑定多个端口。下面是对代码的解析和问题的检查: 1. 首先,创建了两个`NioEventLoopGroup`对象,分别用于处理服务器的连接请求(bossGroup)和处理已经建立连接的网络通信(workerGroup)。 2. 然后,创建了一个`ServerBootstrap`对象,并将bossGroup和workerGroup设置到该对象中。 3. 调用`bootstrap.channel(NioServerSocketChannel.class)`设置服务器的通道类型为NIO类型。 4. 使用`option()`方法设置服务器的一些配置选项。例如,使用`ChannelOption.SO_BACKLOG`设置连接请求的最大队列长度为128,使用`ChannelOption.SO_KEEPALIVE`设置保持连接状态为true。 5. 使用`LoggingHandler`设置日志级别为INFO。 6. 调用`consumer.accept(bootstrap)`方法,允许用户自定义配置`ServerBootstrap`实例。 7. 创建了一个线程池,使用`ThreadPoolExecutor`来执行异步任务。线程池的大小与要绑定的端口数量一致。 8. 使用流式操作,遍历输入的`ports`数组。对于每个端口,使用`bootstrap.bind(port)`方法来绑定端口,并返回一个`ChannelFuture`对象。然后,调用`future.sync()`方法等待绑定完成,并调用`future.channel().closeFuture().sync()`等待通道关闭。 9. 在捕获异常的块中,记录绑定异常并打印日志。 10. 在finally块中,调用`workerGroup.shutdownGracefully()`和`bossGroup.shutdownGracefully()`来优雅地关闭线程组,释放资源。 问题检查: - 通过使用线程池来异步执行端口绑定和关闭操作,可以控制并发度,避免创建过多的线程。这样可以更好地管理系统资源。 - 添加了一些服务器的配置选项,如`SO_BACKLOG`和`SO_KEEPALIVE`,以提供更好的性能和可靠性。 综上所述,这段代码在原有的异步绑定和关闭操作的基础上,进一步添加了线程池的支持和服务器的配置选项,提高了代码的可扩展性、性能和可靠性。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值