记一次内存爆炸的经历

本文原载于https://base.admirable.one/t/topic/149,作者亦是本人,特此申明。


最近有做一个程序,内容其实很简单:调用几百万次一个api,然后把结果保存到 MongoDB 数据库。

一开始我没有想到用 coroutine 等高级方法,就简单采用了“生产者消费者”的模式:第一组线程负责分配任务,第二组线程负责从api获取结果,然后保存到一个队列,第三组线程负责从队列中拿任务并保存到数据库。

程序很快就写出来了,在本机上跑也没有出现问题,但是后来部署到正式机器上后就出现了问题:程序启动后,内存一直拼命增长,直到把内存占满,然后被内核 OOM。

一开始,出于不自信,我想的是会不会是我的程序哪个地方内存泄漏了。但是经过资料的查找,

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值