- 博客(14)
- 收藏
- 关注
转载 ubuntu配置open-mpi笔记(虚拟机)
原文地址:http://chenwenxuan.com/2013/02/17/ubuntu-openmpi/在ubuntu上尝试配置了一下open-mpi,在虚拟机上完成。从安装ubuntu到配置完成mpi的过程。整理一下。1. 安装ubuntu先下载iso文件,ubuntu-12.04.1-server-i386.iso,这个ubuntu不会启动ui界面,适合在虚
2013-07-31 13:22:45 3087
原创 foreach高效并行的例子
在foreach包的mannual中,高效并行的例子:将行分块后,发送到各个workers:applyKernel <- function(newX, FUN, d2, d.call, dn.call = NULL, ...) { foreach(x = iblkcol(newX, 3), .combine = "c", .packages = "foreach")%dopar%
2013-07-31 11:32:25 3999
转载 ubuntu:更新内核与清理无用文件
编辑软件源 sudo gedit /etc/apt/sources.list 查看系统存在的内核。 dpkg -l|grep linux 或dpkg –get-selections|grep linux 显示当前的内核 uname -a 升级内核 apt-get dist-upgrade 删除内核 sudo apt-get remove
2013-07-31 08:58:18 891
原创 配置与使用Hadoop的问题
1.用户组对数据目录必须拥有写权限chmod g-w /hadoop/data/ 或者 chmod 755 /hadoop/data2.单机模式下,output和input文件夹在本机上,而在伪分布模式下,必须位于hdfs文件系统中,否则报错:Input path does not exist方法一:建立本地目录:mkdir input拷贝文件至目录:cp
2013-07-25 14:36:01 4219
原创 Ubuntu搭建hadoop单机版伪分布环境
原文地址:http://os.51cto.com/art/201211/364167.htm在11月初的时候,我们了解了Ubuntu 12.04 搭建 hadoop 集群版环境的方法,今天再来看看在单机版环境中,Ubuntu12.04搭建hadoop是如何实现的。一. 你要安装Ubuntu这一步省略;二. 在Ubuntu下创建hadoop用户组和用户;1
2013-07-24 10:20:45 3813
原创 R脚本并行运行
执行mpirun时,指定hosts可以用选项-H或-host(逗号分割的hosts列表),或者用选项-hostfile指定一个host file。可以使用-n或-np选项指定在这些节点(即hosts)上运行的脚本的副本数量。若-n或-np为1,指定只运行脚本的一个副本,在运行startMPIcluster时,doMPI会使用Rmpi的mpi.comm.spawn函数为你启动多个workers。
2013-07-22 14:55:13 3742
原创 R并行程序框架
library(doMPI)cl registerDoMPI(cl)… use of foreach and %dopar% …closeCluster(cl)mpi.quit()
2013-07-22 14:54:26 1050
原创 R并行开发准备
1. 安装openMPI2. 安装R Packages:install.packages("Rmpi")install.packages("doMPI",dependencies=TRUE) 将自动安装doMPI的依赖包foreach和iterators
2013-07-22 10:15:13 1470
原创 ubuntu下安装openMPI
1.确认以下编译器已安装:gcc --versiong++ --versionpython --version2.下载(默认至当前用户的Downloads目录下)URL: http://www.open-mpi.org/software/ompi/v1.6/目前版本:openmpi-1.6.5.tar.gz3.解压openMPI安装文件,放在当前
2013-07-22 10:12:27 20110 1
转载 ubuntu下安装、启动和卸载SSH
ubuntu默认并没有安装ssh服务,如果通过ssh链接ubuntu,需要自己手动安装ssh-server。判断是否安装ssh服务,可以通过如下命令进行:$ ssh localhostssh: connect to host localhost port 22: Connection refused如上所示,表示没有还没有安装,可以通过apt安装,命令如下:$
2013-07-19 10:23:34 52367 4
原创 学习记录(coursera)
1. Machine Learning, by Andrew NG2. Coding the Matrix: Linear Algebra through Computer Science Applications, by Philip Klein3. Case-Based Introduction to Biostatistics, by Dr. Scott L. Zeger4.
2013-07-06 11:47:17 818
原创 学习记录(Youtube videos)
youtube videos:1.Laplace Transform,Differential Equation:By:hanacademy
2013-07-06 11:05:05 1177
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人