多线程程序跑久了效率下降分析

    最近在写一个搜索引擎,有个中间程序是分析分词结果文件,建立倒排索引。最初写的是单线程的,效率低到无语,于是又改成多线程的了。本以为万事大吉,可是在分析了将近2000文件的时候,效率低的和单线程的没什么区别了。打开任务管理器,线程数显示3(我设置的子线程数量最高为15,加上启动就有的,程序刚运行的时候线程数可以达到20个)。

    百度了下,Windows单个程序的线程数是有上限的,一般只能开到2000个左右。而我的程序中为了方便,把每个子线程都设置为detach状态了。这个状态下,线程结束时其他线程并不能回收其资源,必须到程序退出时才可以。也就是说程序在处理了将近2000个文件时,系统资源已经耗尽了,所以效率降了下来。

    知道了这点,问题就好解决了,把线程设为joinable(可结合)状态,在一个线程中等待每个子线程结束就可以了。

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值