- 博客(19)
- 资源 (1)
- 收藏
- 关注
RSS订阅转载 Merkle Tree
Merkle Tree, 又被称为Hash Tree，是一种树状Hash结构，1979年由Ralph Merkle发明。如前面的blog所述，Merkle Tree 首次在NoSQL存储系统中的应用是在Amazon的Dynamo上。对于分布式的存储系统，可以说同步是最为重要的话题。本质上来说，关系型数据库的ACID特性和目前NoSQL存储系统的BASE特性，核心的差异就在于对同步的
2011-06-30 14:19:00
3963
转载 bucardo 安装配置
本文转自http://blog.osdba.net/?post=52还没来得及看，先转了，有空看看 ===============安装bucardo===========================bucardo是一个perl脚本，需要一些perl的包，先安装这些包：Test-Simple-0.98.tar.gzExtUtils-MakeMaker-6.56.tar.g
2011-06-22 11:03:00
4558
转载 hadoop namenode启动过程详细剖析及瓶颈分析
NameNode中几个关键的数据结构FSImageNamenode会将HDFS的文件和目录元数据存储在一个叫fsimage的二进制文件中，每次保存fsimage之后到下次保存之间的所有hdfs操作，将会记录在editlog文件中，当editlog达到一定的大小（bytes，由fs.c
2011-06-20 20:22:00
4348
2
转载 using pgfincore to pre-cache frequency data
数据库启动的时候，数据是冷却的，在执行SQL时需要到磁盘搜索BLOCK并载入到BUFFER，这个时候的SQL响应速度比命中情况下的响应速度一般要慢10倍以上，这种一般被称为未命中的查询。如果数据库启动的时候刚好遇到SQL执行高峰，可能应为SQL响应速度过慢导致应用被堵塞死。造成长时间的应用堵塞，恶性循环。那么怎么更好的解决这种类似的情况，今天刚好看到了PostgreSQL上的一个很好的
2011-06-16 10:05:00
2084
原创 HBASE安装过程
环境hbase-0.90.3hadoop-0.20.2一开始我用的是hadoop-0.21.0，搞了半天搞不好，日志里面报错说连接的时候出错2011-06-15 16:05:32,239 FATAL org.apache.hadoop.hbase.master.HMaster: Unhandled exception. Starting shutdown.java.io.IOE
2011-06-15 18:31:00
6042
5
原创 Greenplum Web External Tables事例
Defining Command-Based Web External Tables执行的命令或者程序需要在主机上已经存在，创建外部表的命令时可以在ON关键字后面指定在哪些节点上执行。ON ALL| MASTER| number_of_segments| HOST [segment_hostname]| SEGMENT segment_id ]下面给出几个例子
2011-06-15 15:04:00
2129
原创 virtualbox下ubuntu与windows XP共享目录
1、启动VIRTUALBOX以后，菜单栏里找到设备-安装增强工具，然后进入到/cdrom目录下，会发现多了一些文件2、运行./VBoxLinuxAddtions.run3、还是菜单栏里，设备-分配数据空间，在WINDOWS上建一个目录D:/virtualbox/sharedisk，然后命名为sharedisk4、在ubuntu下运行mount -t vboxsf sharedisk /
2011-06-15 13:22:00
1159
原创 APACHE入门
今天本来是想试一下GREENPLUM可写外部表的，结果发现服务器上没有APACHE服务，所以就变成了学习APACHE的过程了。首先要下载一个APACHE，我是从下面的网址下载的，用的2.0.64版本http://httpd.apache.org/download.cgi#apache20然后就是常规步骤了解压 gzip解包 tar xvf编译 configure --pre
2011-06-13 20:29:00
2070
转载 linux xxd命令
请在地址栏输入要查询的 linux 命令。如：访问 http://www.npcsc.com/man/wget 将获得 wget 命令的使用说明。type linux command behind the site url ,eg : http://www.npcsc.com/man/wget ,this will get the useage of wget .( 默认返回的是 html
2011-06-13 11:02:00
6478
转载 数据挖掘技术简介
数据挖掘是目前一种新的重要的研究领域。本文介绍了数据挖掘的概念、目的、常用方法、数据挖掘过程、数据挖掘软件的评价方法。对数据挖掘领域面临的问题做了介绍和展望。 关键词：数据挖掘 数据集合 1. 引言 数据挖掘(Data Mining)是从大量的、不完全的、有噪声的、模糊的、随机的数据中提取隐含在其中的、人们事先不知道的、但又是潜在有用的信息和知识的过程。随着信息技术
2011-06-10 00:17:00
2654
转载 事实表的设计
事实表中一般要包含2部分：一是由主键和外键所组成的键部分，另一部分是用户希望在数据仓库中所了解的数值指标，这些指标是为每个派生出来的键而定义和计算的，称为事实或指标。由于事实是一种度量，所以事实表中的这种指标往往需要具有数值化和可加性的特征。但是在事实表中，只有那些具有完全可加性的事实才能根据所有的维度进行累加而具有意义。而事实表有一些事实表示的是某种强度，这类事实就不具有完全加法性，而是
2011-06-09 22:34:00
2901
原创 使用MYSQL作为HIVE的METASTORE
先确保你已经成功安装了HIVE和MYSQL在hive-site.xml中添加如下内容，指定METASTORE的地址以及连接方式 javax.jdo.option.ConnectionURL jdbc:mysql://10.20.151.10:3306/hive?characterEncoding=UTF-8 JDBC connect string
2011-06-08 12:34:00
8473
3
转载 Linux 安装 Mysql
一、引言 想使用Linux已经很长时间了，由于没有硬性任务一直也没有系统学习，近日由于工作需要必须使用Linux下的MySQL。本以为有Windows下使用SQL Server的经验，觉得在Linux下安装MySql应该是易如反掌的事，可在真正安装和使用MySQL时走了很多弯路，遇见很多问题，毕竟Linux 和Windows本身就有很大区别。为了让和我一样的初学者在学习的过程
2011-06-08 10:47:00
766
原创 POSTGRESQL按拼音排序
1、通过使用一个开源的工具pgpinyinsort来实现，使用很简单，参看下README就OK了http://code.google.com/p/pgpinyinsort/ 2、首选创建一个函数，把text转换为byteacreate or replace function text2bytea(text) returns bytea as$$ return $
2011-06-03 14:34:00
3287
原创 通过fuse使greenplum外部表能使用HDFS上的文件
hadoop hdfs greenplum external table fuse
2011-06-02 17:33:00
2597
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人