LightGBM内存泄露问题
最近利用LightGBM训练分类任务时发现会有内存泄露,在python变量管理中显示的变量内存约为10GB,但进程内存占用为15GB,怀疑LightGBM调用C程序导致的内存泄露,其中查询到相似问题发生在https://github.com/Microsoft/LightGBM/issues/1032和https://github.com/Microsoft/LightGBM/issues/668,怀疑问题出现在categorical_features_list
参数中。
目前暂无比较好的解决办法,只能利用独立进程训练,训练完毕后结束进程。