- 博客(4)
- 收藏
- 关注
RSS订阅原创 oozie定时任务-昨天如何求
最近在使用oozie需要定时跑昨天的数据，因此需要求出昨天的时间的哪一天，因此该变量放在了coordinator.xml文件中定义，写法如下：<workflow> <app-path>${workflowUri}</app-path> <configuration> <property> <name>...
2018-12-14 15:33:21
639
原创 hive优化及执行命令
在学习hive的时候，就要像说下hive和hadoop集群之间的关系了，Hive利用HDFS存储数据，利用MapReduce查询数据hive最适合于数据仓库程序，对于数据仓库程序不需要实时响应查询，不需要记录级别的插入、更新和删除。因此hive不适用于联机事务处理，可以用于联机分析处理。上图都是来解释hive的一个运行情况，用户可以使用JDBC、ODBC、CLI等连接hive需要开...
2018-10-26 13:45:01
317
原创 hue报错无法访问文件系统根目录或不能连接Resource Manager
今天在Linux安装了一下hue，安装之后可以在web页面直接写SQL语句，这样对于一下不太懂大数据的人来讲是挺方便的，hue是基于Python Web框架Django实现的。通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据，例如操作HDFS上的数据，运行MapReduce Job，执行Hive的SQL语句，浏览HBase数据库等等。其自身的功能包含有：...
2018-10-24 20:41:31
2219
3
原创 Ganglia安装后网页不显示数据信息或提示权限拒绝
Ganglia工作原理编辑Ganglia包括如下几个程序，他们之间通过XDR(xml的压缩格式)或者XML格式传递监控数据，达到监控效果。集群内的节点，通过运行gmond收集发布节点状态信息，然后gmetad周期性的轮询gmond收集到的信息，然后存入rrd数据库，通过web服务器可以对其进行查询展示今天初次接触Ganglia，安装之后发现在网页显示的信息一起正常，但唯独没有hadoop的数据...
2018-10-09 20:54:37
1075
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人