FanJin的博客

原创 R语音中的并行与分段技巧

在众多编程语言中，R语言是典型的运行慢和耗内存。当数据表比较庞大（比如一个数据集达100G），而内存有限时（比如一台普通电脑内存16G），使用R语言一次读入和处理，常规做法完全不可行。即使调大虚拟内存（swap空间），使用memory.limit（Windows系统）或 ulimit -s -v（Linux系统）等操作（虚拟内存其实很慢），即使再辅之以rm()和gc()及时清理内存（个人感觉效果甚...