- 博客(6)
- 资源 (21)
- 收藏
- 关注
原创 Storm计算结果是如何存放的
Storm计算的结果存放在哪里? 刚开始接触Storm的时候,往往都会有这么一个疑问:“Storm处理后 的计算结果是保存在哪里呢?”是内存中还是在其它的地方? 官方给出的解释是:Storm不负责保存计算结果,计算结果由运算程序 来负责,如果数据不大,可以简单的保存在内存里,可以每次更新到数据库, 或者采用NoSQL来进行存储。Storm没有像s4那样
2015-07-17 18:12:46 3220
原创 Shell:value too great for base
今天定时计划删除文件没执行成功,查看了下日志,发现报错为line 38 :08:value too great for base (error token is "08")。 查看了下代码: 其它的忽略不计,重点看下38行 ............. if [ $[$(date +%d)-$keepTime] == 0 ]; then ..............
2015-07-08 09:49:28 5815
原创 Hive之简单查询不启用MapReduce
如果你想查询某个表的某一列,Hive默认是会启用MapReduce Job来完成这个任务,如下: 01 hive> SELECT id, money FROM m limit 10; 02 Total MapReduce jobs = 1 03 Launching
2015-07-06 18:16:28 4182
原创 storm与hadoop的对比
hadoop 是实现了 mapreduce 的思想,将数据切片计算来处理大量的离线数据。hadoop 处理的数据必须是已经存放在 hdfs 上或者类似 hbase 的数据库中,所以 hadoop 实现的时候 是通过移动计算到这些存放数据的机器上来提高效率而 storm 不同,storm 是一个流计算框 架,处理的数据是实时消息队列中的,所以需要我们写好一个 topology 逻辑放在那,
2015-07-02 16:41:24 1267
原创 Storm简述及集群安装
Storm 集群类似于一个 Hadoop 集群。 然而你在 Hadoop 的运行“MapReduce job” ,在 storm 上你运行 “topologies (不好翻译)” 。 “job”和“topologies ”本身有很大的不同 - 一 个关键的区别是,MapReduce 的工作最终完成,而 topologies 处理消息永远保持(或直到 你杀了它) 。Strom 集群有主要有两类
2015-07-02 16:33:52 921
原创 查看Linux系统版本信息相关指令
Linux下如何查看版本信息, 包括位数、版本信息以及CPU内核信息、CPU具体型号等等,整个CPU信息一目了然。 1、# uname -a (Linux查看版本当前操作系统内核信息) Linux localhost.localdomain 2.4.20-8 #1 Thu Mar 13 17:54:28 EST 2003 i686 athlon i386 GNU/Lin
2015-07-01 10:53:16 813
2020年DTCC大会嘉宾分享PDF
2022-06-08
JDK1.6 API
2012-09-13
java 开源 聊天系统
2012-07-04
都市供求信息网
2012-06-26
javascript特效程序
2011-12-18
用户登陆管理系统
2011-12-18
JAVA 代码编辑的贪吃蛇游戏
2011-04-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人