大数据实验
文章平均质量分 88
Volcano3511
这个作者很懒,什么都没留下…
展开
-
mpich配置
环境mpich安装关闭防火墙免密码登陆下载解压编译安装配置文件测试单点运行多点并行mpich 编译运行c语言文件多点并行补充配置共享文件夹环境mpich需要在每个机器上进行配置 操作都是相同的需要实现安装gccmpich安装关闭防火墙,免密码登陆见torque配置下载,解压下载地址:http://www.mpich.org/downloads/解压到文件夹中:tar -z原创 2017-11-30 11:02:31 · 1836 阅读 · 0 评论 -
MongoDB配置
关于MongoDB环境安装过程解压安装包添加到Path配置config server配置shard启用分片测试启动关闭问题关于MongoDBMongoDB主要是有四个组件:mongos、config server、shard、replica set。 - mongos,数据库集群请求的入口,所有的请求都通过mongos进行协调,不需要在应用程序添加一个路由选择器,mongos自原创 2017-11-30 11:13:00 · 4505 阅读 · 0 评论 -
大数据实验总结
大数据实验总结大数据实验总结实验总要求基础环境心得体会实验总要求给五台主机,先后配置torque,mpich,mongodb,hadoop,zookeeper,hbasedtorque 有主有从 master:lk slave:slave2~5mpich 各台机器是平等的mongodb 需要分片,副本集,还有各种角色的配置 lk slave2 slave3 sl原创 2017-11-30 10:54:44 · 22448 阅读 · 1 评论 -
torque配置
torque配置torque配置实验要求通用环境配置关闭防火墙无密码登陆修改hosts文件torque 安装server配置节点配置创建队列测试串行文件测试并行文件测试结合MPICH出现错误要点实验要求在五台机器上搭建torque分布式集群环境 lk:master slave2~5:slave节点通用环境配置关闭防火墙查看防火墙状态 service iptable原创 2017-11-30 10:57:54 · 1618 阅读 · 0 评论 -
hadoop配置
软件环境搭建规划安装过程用户关闭防火墙免密登陆之前已经配置过了创建工具安装JDK安装Zookeeper安装hadoopyarn配置PS集群初始化启动yarn集群关启顺序再次启动集群查看集群状态出现问题软件环境 hadoop usr/hadoop/app/hadoop jdk /usr/local/jdk-xxx zookeepe原创 2017-11-30 11:21:16 · 593 阅读 · 0 评论 -
hadoop配置
软件环境搭建规划安装过程用户关闭防火墙免密登陆之前已经配置过了创建工具安装JDK安装Zookeeper安装hadoopyarn配置PS集群初始化启动yarn集群关启顺序再次启动集群查看集群状态出现问题软件环境 hadoop usr/hadoop/app/hadoop jdk /usr/local/jdk-xxx zookeepe原创 2017-11-30 11:21:36 · 524 阅读 · 0 评论 -
hbase配置
安装环境安装过程下载安装包配置hbase配置文件启动hbase来一点小测试产生问题安装环境 Hadoop:hadoop2.7.4 Hbase:hbase.1.2.6 JDK: jdk1.8注意:hbase版本需要支持原来安装的hadoop版本 HBase-0.92.x HBase-0.94.x HBase-0.96.x Hadoop-0.20.205原创 2017-11-30 11:23:32 · 527 阅读 · 0 评论