- 博客(3)
- 资源 (6)
- 收藏
- 关注
转载 Oozie部署spark、hadoop、hive、shell和java程序举例
一、oozie执行shell脚本(执行mr任务,实现合并增量数据) 参考:http://gethue.com/use-the-shell-action-in-oozie/ 1、点击创建、拖动到上面 2、添加命令:bash,当然也可以是linux的其他可执行的命令 3、添加参数:注意---》参数名称是shell脚本的全称(run-mr-compact.sh) ...
2018-08-24 09:47:24 759
转载 CDH HBASE使用Solr创建二级索引,更新删除索引
CDH HBASE使用solr创建二级索引,更新删除索引 转载: https://blog.csdn.net/u010936936/article/details/78064148?locationNum=10&fps=1 关于为什么要创建hbase二级索引,这里不再赘述,直接开始安装配置 1.环境准备 ①安装HBASE,solr, Key-Value S...
2018-08-17 15:16:53 963
转载 HDFS原理解析(整体架构,读写操作流程及源代码查看等)
HDFS原理解析(整体架构,读写操作流程及源代码查看等) 前言 HDFS 是一个能够面向大规模数据使用的。可进行扩展的文件存储与传递系统。是一种同意文件通过网络在多台主机上分享的文件系统,可让多机器上的多用户分享文件和存储空间。让实际上是通过网络来訪问文件的动作。由程序与用户看来,就像是訪问本地的磁盘一般。即使系统中有某些节点脱机,总体来说系统仍然能够持续运作而不会有数据损失。 一...
2018-08-16 17:17:46 466
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人