2015年08月_dazheng

12月 11月 09月 08月 07月 06月 05月

原创大规模数据管理系统调查（学习笔记）

介绍大数据的四个特性 Volume（体量）、Velocity（速度）、Variety（多样性）、Veracity（精确性）应对介绍基本情况 Data modelSystem architectureConsistency model基本实现原理数据模型和数据分区SEDA/MapReduce架构高扩展性基于timestamps的并发控制协议强一致性模型扩展约束BASE模型及

2015-08-16 14:41:59 1280

翻译 Big Data Lambda Architecture 翻译

Big DataLambda ArchitecturePosted on September5, 2012 by dbtubeIn orderto meet the challenges of Big Data, you must rethink data systems from theground up. You will discover that some of the most

2015-08-04 21:06:36 1408

原创 Linux\AIX 常用

1、编辑linux内核 1. 在/usr/src下untar这个包. tar -xjf linux-2.6.25.tar.bz2 2. 配置内核 cd /usr/src mv linux-2.6.25 linux cd linux make mrproper #(删除一些stable的文件,针对刚do

2015-08-03 15:20:12 698

原创 CentOS6.4上安装配置snappy

1、下载 [hadoop@master pub]$ wget https://snappy.googlecode.com/files/snappy-1.1.0.tar.gz2、安装 [hadoop@master snappy-1.1.0]$ sudo yum install gcc gcc+ gcc-c++ [hadoop@master bin]$ tar axvf snap

2015-08-03 15:08:31 5047 1

原创 Hive常用

主要整理于2011、2012年1、启动server及元数据 nohup hive --service hiveserver2 10000 > /dw/log/hiveserver.log 2>&1 & nohup hive --service metastore 9083 > /dw/log/metastore.log 2>&1 &2、字符集 hive元数据存储用mys

2015-08-03 15:05:40 716