2015年06月_Eric-L90

12月 11月 10月 09月 08月 07月 06月 05月 04月 01月

转载详细，Qt Creator快捷键大全，附快捷键配置方法

一、快捷键配置方法：进入“工具->选项->环境->键盘”即可配置快捷键。二、常用默认快捷键：编号快捷键功能1Esc切换到代码编辑状态2F1查看帮助（选中某一类或函数，按下F1，出现帮助文档）3F2在光标选中对象的声明和定义之间切换（和Ctrl+鼠标左键一样的效果，选中

2015-06-24 16:46:19 1279

转载 Hadoop中HDFS写入文件的原理剖析

要为即将到来的大数据时代最准备不是，下面的大白话简单记录了Hadoop中HDFS在存储文件时都做了哪些个事情，位将来集群问题的排查提供一些参考依据。步入正题创建一个新文件的过程：第一步：客户端通过DistributedFilesystem 对象中的creat（）方法来创建文件，此时，RPC会通过一个RPC链接协议来调用namenode，并在命名空间中创建一个新文件，nam

2015-06-16 20:27:04 1312

原创 elasticsearch bulk报错EsRejectedExcutionException[rejected execution(queue capacity 50) on.......]

最近在使用elasticsearch的时候，遇到这样一个问题，其实一看大家都知道。就是队列过长了。处理不过来导致失败了。这里从官网查了一下资料，在进行bulk操作的时候默认是50个。这样，很容易就会报这种错误。我们需要调大一些。下面是官网关于Thread Pool的介绍Thread PooleditOn this pageThread p

2015-06-15 16:55:30 7944

转载 java -jar 报错，classnotfound

打包可执行jar包时，MANIFEST.MF总是个让人头疼的东西，经常出现这种那种问题。一个例子： ================================================================================ Manifest-Version: 1.0 Main-Class: test.Main Class-Path: ./

2015-06-15 16:18:07 2531

原创 HDFS为什么使用大块，如64MB，以及推荐流方式访问文件

HDFS为什么使用大块，如64MB，128MB1，减少NameNode的压力。namenode用来存储hdfs上文件的元数据信息，如果是小文件，会导致产生大量的元数据信息。hdfs中每个文件，目录，和数据块的存储信息大约在150字节。这样，如果大量小文件会导致namenode内存不够用。2，最小化寻址时间。如果块设置的足够大，从磁盘传输数据的时间会明显大于定位这个块开始位置所需要的

2015-06-04 13:58:18 1894

原创 Hadoop回顾之Hadoop发展史

说到了Hadoop，那么，什么是Hadoop呢？我们先来了解一下什么是Hadoop。Hadoop：这个我们就没法顾名思义了。这只是一个玩具大象的名字。哈哈，是不是挺逗。这只大象也算是闻名世界了。Hadoop，用官方属于来说，就是一个由Apache基金会所开发的分布式基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。简单点说，Hado

2015-06-04 11:15:32 4520

原创 Hadoop杂谈

以前因为工作的需要研究过一段时间的Hadoop，不过最后公司还是没有用，就放了下来。现在觉得，既然研究过，把整个hadoop生态系统都研究完了。就不应该这么扔了，不一定什么时候就会用上。所以，决定回顾一下以前学习的hadoop知识，hdfs，yarn，mapreduce，hbase，pig，hive，zookeeper等

2015-06-04 09:43:00 564

转载 Linux NFS服务器的安装与配置

转载自：http://www.cnblogs.com/mchina/archive/2013/01/03/2840040.html一、NFS服务简介　　NFS 是Network File System的缩写，即网络文件系统。一种使用于分散式文件系统的协定，由Sun公司开发，于1984年向外公布。功能是通过网络让不同的机器、不同的操作系统能够彼此分享个别的数据，让应用程序在客户端通过网络

2015-06-03 14:06:51 482