2016年06月_kf_panda

转载 Java对MySQL数据库进行连接、查询和修改

0. 一般过程：　　(1) 调用Class.forName()方法加载驱动程序。　　(2) 调用DriverManager对象的getConnection()方法，获得一个Connection对象。　　(3) 创建一个Statement对象，准备一个SQL语句，这个SQL语句可以是Statement对象（立即执行的的语句）、PreparedStatement语句（预编译的语句）

2016-06-27 10:01:59 324

原创 KeyValue 结构

key: Row Length(2B) + Row + Column Family Length(1B) + Column Family + Column Qualifier + TimeStamp(8B) + KeyType(1B) bytes: if(tagsLength == 0)keylength(4B) + valuelength(4B) + key +

2016-06-22 11:05:10 844

原创 hdfs shell 命令

adoop fs –ls / 列出当前目录有哪些子目录，有哪些文件。hadoop fs –mkidr /test 在Hadoop文件系统当中，创建一个test目录hadoop fs –get /filename 从Hadoop文件系统当中，获取一个文件到本地的文件系统。hadoop fs –put srcfile /desfile 从本地的文件系统上传一个文件到

2016-06-20 10:37:16 369

转载 Hbase0.98.4中部署用户自定义的Observer Coprocessor

Hbase自0.92之后开始支持Coprocessor（协处理器），旨在使用户可以将自己的代码放在regionserver上来运行，即将计算程序移动到数据所在的位置进行运算。这一点与MapReduce的思想一致。Hbase的Coprocess分为observer和endpoint两大类。简单说，observer相当于关系型数据库中的触发器，而endpoint则相当于关系型数据库中的存储过程。关于H

2016-06-20 10:14:30 650

转载检查操作系统版本: 必须是5.1 or 5.2。实际为 6.1未通过

软件参数OS：Windows server 2008 Enterprise R2 x64 DB：Oracle 10g x64 VM：Sun JDK 1.6 update31 x64 问题描述安装Oracle10g提示不能安装，如图：查看Log信息如下：使用 p

2016-06-13 14:28:50 20155 1

转载 mysql的tmp_table_size和max_heap_table_size

先说下tmp_table_size吧：它规定了内部内存临时表的最大值，每个线程都要分配。（实际起限制作用的是tmp_table_size和max_heap_table_size的最小值。）如果内存临时表超出了限制，MySQL就会自动地把它转化为基于磁盘的MyISAM表，存储在指定的tmpdir目录下，默认:mysql> show variables like "tmpdir";

2016-06-12 18:03:29 652

原创 spool 2

1.spool的作用是什么？spool的作用可以用一句话来描述：在sqlplus中用来保存或打印查询结果。2.spool在oracle 9i、10g和11g下的语法及使用示例oracle 9i spool语法SPO[OL] [file_name[.ext]|OFF|OUT]oracle 10g、11g spool语法SPO[OL] [file_name[.ext] [CRE

2016-06-05 18:35:37 784

原创 oracle spool

关于SPOOL(SPOOL是SQLPLUS的命令，不是SQL语法里面的东西。)对于SPOOL数据的SQL，最好要自己定义格式，以方便程序直接导入,SQL语句如：select taskindex||'|'||commonindex||'|'||tasktype||'|'||to_number(to_char(sysdate,'YYYYMMDD')) from ssrv_sendsms_t

2016-06-05 16:03:48 301

原创 centos安装instantclient（oracle精简客户端）步骤

author：skatetime：2012/08/08centos安装instantclient（oracle精简客户端）步骤环境os版本：centos5.5kernel： 2.6.18-194.el5 下载软件包：oracle-instantclient-basic-10.2.0.5-1.x86_64.rpmoracle-instantclient-deve

2016-06-05 14:11:57 2029

原创 sqluldr

工具下载地址： http://www.anysql.net/tools/sqluldr2-non-free-features.html右侧下载SQLULDR2分别对应32为，64位的win和Linux平台安装步骤1.需要安装oracle_client2.复制sqluldr2_linux32_10204.bin（64位系统用sqluldr2_linux

2016-06-02 19:12:26 1565

原创华为hindex split

hindex在源码中关于split的修改部分1、CompactSplitThread.requestSplit 如果是索引表直接退出 public synchronized void requestSplit(final HRegion r, byte[] midKey) { if (midKey == null) { LOG.debug("Region " +

2016-06-02 13:48:46 1086

转载 HBase 0.94中的Split策略

HBase 0.94之前版本中，split使用的是ConstantSizeRegionSplitPolicy。当region中文件大小超过配置中所指定大小时，会进行切分。而在0.94版本之后，默认split策略修改为了IncreasingToUpperBoundRegionSplitPolicy。该策略使用了另一种方法来计算是否应当切割，导致原先的参数失效。该方法中的分配策略，是根

2016-06-02 13:25:23 391

原创 hbase1.1.3 启动一

1. HMaster中有个main方法,这是HMaster启动的开始的地方 /** * @see org.apache.hadoop.hbase.master.HMasterCommandLine */ public static void main(String [] args) { VersionInfo.logVersion(); new HMaster

2016-06-01 19:18:22 1267

原创 ORACLE 物化视图一

物化视图是一种特殊的物理表，“物化”(Materialized)视图是相对普通视图而言的。普通视图是虚拟表，应用的局限性大，任何对视图的查询，Oracle都实际上转换为视图SQL语句的查询。这样对整体查询性能的提高，并没有实质上的好处。1、物化视图的类型：ON DEMAND、ON COMMIT 二者的区别在于刷新方法的不同，ON DEMAND顾名思义，仅在该物化视图“需要”被刷新

2016-06-01 13:01:34 292

kf_panda