- 博客(6)
- 资源 (3)
- 收藏
- 关注
原创 dashboard中资源释放
针对我们在openstack中创建实例时,有的时候会出现一些状态错误的实例,而直接删除又无法删除,这个时候可以选择去数据库中直接删除。删除数据库时,最开始需要删除的是instance表中相关的记录,如果发现因为外键的原因删除失败,则可根据提示信息找到与之有外键关联的表中信息,先将其删除之后再去删除instance表中的记录,直到最终删除为止。当我们将instance中的实例
2016-03-11 21:43:40 681
原创 Hadoop中的YARN
Apache Hadoop YARN (Yet Another Resource Negotiator,另一种资源协调者)是一种新的 Hadoop 资源管理器,它是一个通用资源管理系统,可为上层应用提供统一的资源管理和调度,它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。MRv1 的缺陷 MapReduce 的第一个版本既有优点也有缺点。MRv1 是目前使用的
2016-03-08 15:25:19 647
原创 hadoop 集群 加入一个新的存储节点和删除一个计算节点需要刷新集群状态命令
方式1:静态添加datanode,停止namenode方式1.停止namenode 2.修改slaves文件,并更新到各个节点3.启动namenode 4.执行hadoop balance命令。(此项为balance集群使用,如果只是添加节点,则此步骤不需要) -- 方式2:动态添加datanode,不停namenode方式 1.
2016-03-07 21:06:57 5041
原创 hadoop细节积累
1、hadoop可以运行在3种模式下:单机模式,不存在守护进程,所有的东西都运行在一个jvm上,也没有分布式存储系统,使用的是本地文件系统伪分布式,所有守护进程都运行在同一台机器上完全分布式,hadoop守护进程运行在每台机器上2、hadoop的集群是基于master/slave模式,namenode和jobtracker属于master,datanode和tasktracker属
2016-03-07 20:36:33 338
原创 hadoop源码分析环境搭建(win7+cygwin+jdk+ant+eclipse+Hadoop-1.0.0)
jdkanteclipsehadoop-1.0.0这些需要安装或者下载ant下载后将文件夹放在hadoop-1.0.0里面执行ant eclipse当出现E:\Hadoop\hadoop-1.0.0\build.xml:2294: E:\Hadoop\hadoop-1.0.0\.eclipse.templates is not a directory.时,手动创
2016-03-06 11:57:03 845 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人