- 博客(12)
- 收藏
- 关注
RSS订阅转载 Hadoop Speculative Execution - Hadoop推测执行
1.推测执行所谓的推测执行，就是当所有task都开始运行之后，Job Tracker会统计所有任务的平均进度，如果某个task所在的task node机器配置比较低或者CPU load很高（原因很多），导致任务执行比总体任务的平均执行要慢，此时Job Tracker会启动一个新的任务（duplicate task），原有任务和新任务(一个task会有多个attempt同时执行)哪个先执行完就把
2014-08-23 09:37:15
960
原创 Apache Thrift学习小结
1.Apahce Thrift简介 Thrift是一个软件框架，用来进行可扩展且跨语言的服务的开发。它结合了功能强大的软件堆栈和代码生成引擎，以构建在 C++, Java, Python, PHP, Ruby, Erlang, Perl, Haskell, C#, Cocoa, JavaScript, Node.js, Smalltalk, and OCaml 这些编程语言
2014-08-10 10:00:39
703
转载 vim的记录操作以及历史命令窗
1.vim的记录操作 我经常会不小心地只按下“q”键什么的，然后就看到的烦人的“recording”字样显示在编辑器下边了。有时候在想退出编辑器时，出现这样的情况让我发疯。今天终于有空来研究一下个这“recording”到底是干什么的了。。。 原来它是用来记录按键的，然后我们就可以在以后用这个记录了。如何用？ 在正常状态（正常状态 = !inser
2014-08-09 18:12:42
23680
原创 Unix like下gcc编译连接c/c++使用方法小结
1.gccgcc是由GNU计划维护的，是一个在Unix like系统下进行编译和连接的工具。
2014-08-09 11:20:18
1096
原创 Lucene、Nutch和Hadoop三者之间的关系
1.Lucene、Nutch和Hadoop三者之间的关系 Hadoop 是一个开源的可运行于大规模集群上的分布式并行编程框架，由于分布式存储对于分布式编程来说是必不可少的，这个框架中还包含了一个分布式文件系统 HDFS( Hadoop Distributed File System )。也许到目前为止，Hadoop 还不是那么广为人知，其最新的版本号也仅仅是 0.16，距离 1.
2014-08-03 23:33:09
1875
转载 Linux新一代文件系统Ext4剖析
Linux 内核的每次发行都伴随一些惊喜，今年 12 月份发行的 2.6.28 也不例外。这个发行版是首个稳定的 ext4 文件系统（它还包含其他出色的特性，比如正在开发的 Btrfs）。这个下一代扩展文件系统提供更好的伸缩性、可靠性和许多新功能。ext4 的伸缩性如此之大，以致最大的文件系统所用的磁盘空间将达到 100 万 TB。扩展文件系统的简史虚拟文件系统交换VF
2014-08-02 17:15:02
950
转载 Unix Like的fork()函数使用
一、fork入门知识 一个进程，包括代码、数据和分配给进程的资源。fork（）函数通过系统调用创建一个与原来进程几乎完全相同的进程，也就是两个进程可以做完全相同的事，但如果初始参数或者传入的变量不同，两个进程也可以做不同的事。 一个进程调用fork（）函数后，系统先给新的进程分配资源，例如存储数据和代码的空间。然后把原来的进程的所有值都复制到新的新进程中，只有少数值与原来
2014-08-01 23:54:14
600
原创 ChinaJoy
1.ChinaJoyChinaJoym中国国际数码互动娱乐展览会，简称“”，是继美国E3展、日本东京电玩展之后的又一同类型互动娱乐大展，尤以网络游戏为主。每年举办一届，37游戏、游族网络、盛大网络、暴雪、完美世界等众多游戏厂家参展，吸引大量游戏爱好者前往。2014年第十二届ChinaJoy将于2014年7月31日至8月3日在中国上海新国际博览中心举办，本届ChinaJoy展位分布图曝光，将使用
2014-08-01 21:07:05
710
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人