2015年09月_FocusOneThread

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 github错误 Agent admitted failure to sign using the key Permission denied (publickey)

ssh-add

2015-09-28 19:49:08 1871

原创自定义/指定 HDFS Block存放位置

https://issues.apache.org/jira/browse/HDFS-2576

2015-09-26 11:41:17 2027

原创 HDFS 2.7.1 所有shell命令

http://hadoop.apache.org/docs/r2.7.1/hadoop-project-dist/hadoop-hdfs/HDFSCommands.htmlhttp://hadoop.apache.org/docs/r2.7.1/hadoop-project-dist/hadoop-common/FileSystemShell.html

2015-09-26 11:21:14 734

原创 HDFS 2.7.1 所有配置项

http://hadoop.apache.org/docs/r2.7.1/hadoop-project-dist/hadoop-common/core-default.xmlhttp://hadoop.apache.org/docs/r2.7.1/hadoop-project-dist/hadoop-hdfs/hdfs-default.xml

2015-09-26 11:13:50 1102

原创 VoltDB EE 源码执行路径

SQL语句是 select sum(id) from testtable0 group by name0;

2015-09-22 14:28:02 800

原创 Debug VoltDB EE部分代码

https://forum.voltdb.com/showthread.php?1429-How-to-enable-gdb&p=4186#post4186

2015-09-22 13:40:50 893

原创 Linux下Eclipse里用gdb调试JNI里C/C++

1，给Eclipse安装CDT插件 2，先以Debug方式运行java程序，停在java代码的断点上 3，Debug Configuration里选择C/C++ Attach to Application，在debugger页勾选Non-stop mode，然后attach相应的java程序的pid 4，给C++的代码加上断点，我的so文件和C++源码都在这一个Java Project里 5

2015-09-21 19:46:23 1803

翻译 HDFS 官方文档中文

HDFS是一个分布式文件系统，在普通的价格低廉的商用机器上运行，具有很高的容错性，读写性能很高，比较适用于大块文件，HDFS对外提供POSIX标准的流接口来读写文件。 1.设计目标 1.1宕机容忍一个HDFS集群会包含数百上千个机器，每个都存储整个HDFS的一部分数据，如果有宕机情况，快速的侦测宕机和自动恢复是HDFS架构的主要设计目标。 1.2流式数据访问 HDFS设计目标更多是为批量

2015-09-18 15:11:31 4917

原创 Debug HDFS （远程调试HDFS）

替换bin/hdfs里的相应的启动配置如果不替换直接添加，会有ERROR: Cannot load this JVM TI agent twice, check your java command line for duplicate jdwp options. Error occurred during initialization of VM agent library failed t

2015-09-18 11:32:11 2146

原创 NameNode 接收请求

走 hadoop-common-project\hadoop-common\src\main\java\org\apache\hadoop\ipc\Server.java 的 value = call(call.rpcKind, call.connection.protocolName, call.rpcRequest, call.time

2015-09-18 11:09:37 616

原创 HDFS 2.2 配置文件

core-site.xml <property> <name>fs.defaultFS</name> <value>hdfs://localhost:9000</value></property><property> <name>io.file.buffer.size</name> <v

2015-09-17 17:10:19 803 1

翻译 HBase的ACID http://hbase.apache.org/acid-semantics.html

HBase的ACID HBase不是一个ACID完整的数据库，然而HBase还是保证很多ACID的特性 1.ACID的定义：原子性，一个操作是原子的则这个操作或者全部完成，或者不完成。一致性，所有对表的操作都会使表从一个状态变成另一个状态。隔离性，并发操作都是互不影响的。持久性，任何在客户端显示‘操作成功’的操作说明数据肯定不会丢失。另外HBase还有一个特性就是，如果一个更新操

2015-09-17 16:03:37 881

翻译 HBase架构 http://hbase.apache.org/book.html#_architecture

1.Master HMaster是Master Server的实现，HMaster负责监控集群里所有RegionServer，HMaster也是管理所有元数据，一般HMaster和HDFS的NameNode同在一台机器上运行。一个最普遍的问题就是如果HMaster宕机了怎么办，因为HBase的客户端是直接和RegionServer通信的，所以如果HMaster宕机，整个集群仍会在一个“稳定的状

2015-09-17 13:46:48 876

转载 distributed-algorithms-in-nosql-databases

http://highlyscalable.wordpress.com/2012/09/18/distributed-algorithms-in-nosql-databases/

2015-09-17 10:36:36 646 1

翻译 HBase 数据模型

HBase，也是Apache HBase，是一个分布式、列存储的数据库，HBase是根据谷歌的BigTable理论开发，就像是谷歌的BigTable在Google文件系统之上发挥的作用一样，HBase在Hadoop之上发挥同样的作用。1.HBase的数据模型数据以表的形式存储，也就是有行和列，不过Hbase的表是一个多维的map。1.1 HBase的Table HBase的Table由多个行

2015-09-16 16:28:49 2181 1

转载 google bigtable论文，其引用的文献都应该很经典

http://static.usenix.org/event/osdi06/tech/chang/chang_html/#DeWitt84

2015-09-16 09:43:03 1231

原创 int数组操作类（不是list，自动扩张的数组）

public class OptIntArrayList { private int[] elements; private int size; private boolean dummy; public static OptIntArrayList DUMMY = new OptIntArrayList(0, true); public static Strin

2015-09-15 09:45:47 652

原创 java.lang.UnsatisfiedLinkError: .so: .so: undefined symbol: SomeClass

可能是因为h文件里的这个class SomeClass有个方法声明了，但是cpp文件里没有实现

2015-09-14 10:31:40 1783

原创 linux DNS配置

vi /etc/resolv.conf 加上 nameserver 8.8.8.8/etc/init.d/network restart

2015-09-11 15:34:06 559 1

原创 java NIO 传送文件

package com.cloudwave.tools.distributedclient;import java.io.File;import java.io.FileInputStream;import java.io.IOException;import java.net.InetSocketAddress;import java.nio.ByteBuffer;import java

2015-09-09 16:28:22 654

转载 java NIO 实例

import java.io.IOException; import java.net.InetSocketAddress; import java.nio.ByteBuffer; import java.nio.channels.SelectionKey; import java.nio.channels.Selector; import java.nio.channels.S

2015-09-09 13:40:09 480