hadoop
康桥
这个作者很懒,什么都没留下…
展开
-
Hadoop安全管理-java安全介绍
Java加密扩展包(JCE)JCE的作用是提供以下的安全操作:l 加密(密码)l 安全密钥交换l 安全消息摘要l 提供另一种密钥管理系统JCE包括一组文档以及4 个jar文件1. $JAVA_HOME\jre\lib\security\US_export_policy.jar2. $JAVA_HOME\jre\lib\jce.ja原创 2013-10-28 12:55:17 · 1162 阅读 · 0 评论 -
Hadoop 任务调度分析启动篇
学习hadoop已有一段时间, 从最初的搭建环境, 配置环境, 编写MapReduce应用, 到基于hive的查询, 慢慢的开始喜欢和习惯它的这种模式, 最近对hadoop集群环境运行原理很感兴趣, 很想知道它究竟是怎么做到这种分步式的运算与协调, 也很想能够从事这方面的工作. 学习了董西成的>一书后, 慢慢的为我揭开了Hadoop的盖头, 通过分析源码的实现, 从中也深刻的体会到架构原创 2013-10-21 13:22:11 · 2077 阅读 · 0 评论 -
Client提交作业与作业在JT中的初始化流程分析
作业提交与初始化主要是为后续的MR程序运行做准备工作.将其分为四个步骤即1配置MR作业环境, 2上传作业信息, 3提交作业, 4作业初始化.下面将分别介绍以上四个步骤1.1设置作业环境这一步就是我们在MR中经常要用到的那些配置. 配置保证MR基本运行的参数.以wordcount为例配置如下: Configuration conf = new Configur原创 2013-10-30 21:18:54 · 1936 阅读 · 0 评论