hadoop
文章平均质量分 92
执着的心
喜好编程,对java,j2ee有自己的看法,同时期待在android上有所发展。性格和昵称一样,执着求知。
展开
-
Hadoop 3.0升级
Hadoop 3.0版本升级,解决多个漏洞原创 2022-10-10 15:02:56 · 1697 阅读 · 1 评论 -
hadoop常用linux命令与操作
一、linux常用命令 1. 通过远程工具登陆到linux后,所在的位置是当前登录用户的家目录(home directory)。 2. 家目录的符号用~表示。 3. linux的文件系统是一个树结构。 linux文件系统的树根成为根目录,使用符号"/"表示。 linux文件系统中使用符号".."表示上级目录。 l转载 2015-06-13 12:14:10 · 1076 阅读 · 0 评论 -
hadoop初级到资深
1、hadoop是什么? 适合大数据的分布式存储与计算平台 2、hadoop版本有哪些? ①Apache:官方版本(1.1.2) ②Cloudera:使用下载最多的版本,稳定,有商业支持,在Apache的基础上打上了一些patch。推进使用。 ③Yahoo:Yahoo内部使用的版本,发不过两次,已有的版本都放到Apache上,后续不再继续发布,在集中在Apache转载 2015-06-13 12:08:11 · 1444 阅读 · 1 评论 -
eclipse开发python,环境搭建
1.下载python-2.7.9.amd64.msi并安装; 2.从Eclipse的菜单 Window --> Preferences 打开首选项配置; 3.首选项配置页面,找到左边的PyDev项展开,点击Interpreter - Python 项(Interpreter是解释器的意思), 然后点击右侧的 New... 按钮,填写Interpreter Name,选择python.原创 2015-10-29 11:54:13 · 489 阅读 · 0 评论 -
hadoop rpc基础
第一部分: hadoop rpc基础 RPC,远程程序调用,分布式计算中C/S模型的一个应用实例。 同其他RPC框架一样,Hadoop分为四个部分: 序列化层:支持多种框架实现序列化与反序列化函数调用层:利用java反射与动态代理实现网络传输层:基于TCP/IP的Socket机制服务的处理框架:基于Reactor模式的事件驱动IO模型 Hadoop RP转载 2015-11-24 22:27:08 · 576 阅读 · 0 评论 -
HDFS分布式(HA)
5个节点:hadoop01,hadoop02,hadoop03,hadoop04,hadoop05(时间同步:ntpdate -u ntp.sjtu.edu.cn) NN DN ZK ZKFC JN hadoop01 Y Y hadoop02 Y Y Y原创 2016-09-07 11:43:35 · 441 阅读 · 0 评论 -
yarn分布式(HA)
5个节点:hadoop01,hadoop02,hadoop03,hadoop04,hadoop05(时间同步:ntpdate -u ntp.sjtu.edu.cn) NN DN ZK ZKFC JN RM NM hadoop01 Y Y Y hadoop02原创 2016-09-07 11:50:20 · 390 阅读 · 0 评论