自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(10)
  • 资源 (19)
  • 收藏
  • 关注

转载 HBase 在淘宝的应用和优化小结

本文来自于NoSQLFan联合作者@koven2049,他在淘宝从事Hadoop及HBase相关的应用和优化。对Hadoop、HBase都有深入的了解,本文就是其在工作中对HBase的应用优化小结,分享给大家。原文地址:http://walkoven.com/?p=57文章PDF下载:http://walkoven.com/hbase:optimization and apply summ

2012-07-30 17:49:34 2564

转载 HBase 性能调优

因官方Book Performance Tuning部分章节没有按配置项进行索引,不能达到快速查阅的效果。所以我以配置项驱动,重新整理了原文,并补充一些自己的理解,如有错误,欢迎指正。配置优化zookeeper.session.timeout默认值:3分钟(180000ms)说明:RegionServer与Zookeeper间的连接超时时间。当超时时间到后,ReigonServer

2012-07-30 17:06:32 1747

转载 关系型数据库到HBase的数据储存方式变迁

如今Bigtable型(列族)数据库应用越来越广,功能也很强大。但是很多人还是把它当做关系型数据库在使用,用原来关系型数据库的思维建表、存储、查询。本文以hbase举例讲述数据模式的变化。传统关系型数据库(mysql,oracle)数据存储方式主要如下:图一上图是个很典型的数据储存方式,我把每条记录分成3部分:主键、记录属性、索引字段。我们会对索引字段建立索引,达到二级索引的效果。

2012-07-30 17:03:35 4494

转载 淘宝数据魔方技术架构解析

淘宝网拥有国内最具商业价值的海量数据。截至当前,每天有超过30亿的店铺、商品浏览记录,10亿在线商品数,上千万的成交、收藏和评价数据。如何 从这些数据中挖掘出真正的商业价值,进而帮助淘宝、商家进行企业的数据化运营,帮助消费者进行理性的购物决策,是淘宝数据平台与产品部的使命。为此,我们进行了一系列数据产品的研发,比如为大家所熟知的量子统计、数据魔方和淘宝指数等。尽管从业务层面来讲,数据产品的研发

2012-07-30 17:01:32 1286

转载 分布式数据库 HBase

HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase是Google Bigtable的开源实现,类似Google Bigtable利用GFS作为其文件存储系统,HBase利用Hadoop HDFS作为其文件存储系统;Google运行MapReduce来处理Bi

2012-07-30 16:59:28 1079

转载 关于Hadoop你不得不知道的12个事实

【IT168 评论】现如今,Apache Hadoop已经无人不知无人不晓。当年雅虎搜索工程师Doug Cutting开发出这个用以创建分布式计算机环境的开源软件库,并以自己儿子的大象玩偶为其命名的时候,谁能想到它有一天会占据“大数据”技术的头把交椅呢。  虽然Hadoop伴随大数据一同火爆起来,但相信还是有许多用户对于它不甚了解。在上周名的TDWI解决方案峰会中, TDWI研究主任兼行业分析

2012-07-26 18:19:45 1699

转载 大数据新挑战:如何构建成功的IT策略

大数据时代即将到来,如何开发出一套成功的企业IT管理策略,是摆在众CIO面前的挑战话题。想要在大数据时代获得信息化的成功,CIO要将IT团队的数据、善于分析和可视化的工具、专业的数据处理和识别模式结合在一起。什么是大数据?Gartner给出的定义有三个主要特征:大数据量,处理速度,类型和非结构化数据源(如社会互动、视频、音频)。如今在企业中,特别是大中型企业,产生了很多的数据集,如此庞大和多样

2012-07-22 23:18:12 2908

原创 Multi-statement transaction required more than 'max_binlog_cache_size' bytes of storage

最近在整一个通讯录的关系,数据量大约是40E当把文件导入到数据库的时候 遇到这这个问题 错误信息:Multi-statement transaction required more than 'max_binlog_cache_size' bytes of storage; increase this mysqld variable and try again解决方法如

2012-07-20 20:50:02 9049

转载 常用数据库的备份与恢复的方法

总结下各个数据库的 备份与恢复的方法  (有待补充)---------------------Oracle------------------------备份:exp user/password@orcl file='/app/2012.dmp'恢复:imp user/password@orcl fromuser=ufidanc touser=pm file='/app/2

2012-07-12 17:19:52 1576

转载 MapReduce和并行数据库,朋友还是敌人?

在2010年1月的ACM上,有两篇文章非常吸引人注意。一篇文章是Google的Jeffrey Dean、Sanjay Ghemawat发表的标题为《MapReduce:一个灵活的数据库处理工具》,另一篇文章是Michael Stonebraker、Daniel  Abadi、David J. DeWitt、Sam Madden、Erik Paulson、Andrew Pavlo、Alexander

2012-07-02 16:50:48 1611

hadoop-0.20.2-cdh3u6

hadoop-0.20.2-cdh3u6 cloudera

2013-09-04

hadoop-0.20.2-cdh3u4

hadoop-0.20.2-cdh3u4 clouera

2013-09-04

hive-0.10.0

0.10.0 支持Hadoop 0.20.x, 0.23.x.y, 1.x.y, 2.x.y 要是需要0.11.0 可以@ 我,文件太大 上传不上来。

2013-09-04

hive-0.8.1

0.8.1 支持Hadoop0.20.1 and 0.20.2

2013-09-04

深入理解MySQL核心技术(中文PDF)

《深入理解MySQL核心技术》:从公共可用性的意义上讲,MySQL源代码是开放源代码,但如果对其不了解,则实质上,它对于您来说是封闭的。MysQL开发团队的前成员Sasha Pachev通过《深入理解MySQL核心技术》给出了MySQL 5的全面指南,揭示了这一强大数据库的内部运作。您将直奔MySQL核心技术,了解各种数据结构和各种方便的功能的运作情况,了解如何添加新的存储引擎和配置选项等。 《深入理解MySQL核心技术》从结构概况讲起,在这一部分解释了MysQL的不同组件是如何协同工作的。接着将学习设置有效的可编译代码副本的步骤,然后使用基本架构添加自己的配置变量和存储引擎。

2013-03-22

hbase-0.90.5.tar.gz

hbase-0.90.5.tar.gz是hbase众多版本中的一种。

2012-12-18

wampserver2.2e

Windows系统下的Apache+Mysql+PHP,一组常用来搭建动态网站或者服务器的开源软件

2012-12-10

hadoop-0.20.2安装包

hadoop-0.20.2安装包 具体的安装步骤在博客里面已经写出。

2012-12-10

hbase-0.94.0安装包

hbase-0.94.0 可以匹配 hadoop-1.0.3来进行安装

2012-11-30

hbase-0.20.6安装包

hbase-0.20.6 可以和 hadoop-0.20.2匹配安装

2012-11-30

zookeeper 3.4.3安装包

zookeeper主要用来解决分布式集群中应用系统的一致性问题,它能提供基于类似于文件系统的目录节点树方式的数据存储。除了数据存储,它还可以用来维护和监控你存储的数据的状态变化。

2012-11-30

infobright-4.0.6-0-x86_64-ice

infobright ,一个基于mysql的数据仓库系统实现,它已经是很多开源或商用BI系统的底层存储引擎。

2012-11-27

X-Win32 2012 安装文件

X-Win32 2012是最新版的X-Win32 是一个可以在windows用窗口模式来访问linux的工具 在安装oracle的时候常常会用得到

2012-11-06

redis安装包

redis-2.4.16 REmote DIctionary Server(Redis) 是一个由Salvatore Sanfilippo写的key-value存储系统。Redis提供了一些丰富的数据结构,包括 lists, sets, ordered sets 以及 hashes ,当然还有和Memcached一样的 strings结构.Redis当然还包括了对这些数据结构的丰富操作。

2012-10-23

hadoop 1.0.3安装包

hadoop安装包 版本是1.0.3 具体的安装步骤已经在博客里面写出

2012-10-22

Hadoop权威指南

Hadoop权威指南 HIVE HBASE ZOOKEEP pdf格式的

2012-10-16

hive-0.9.0

hive-0.9.0 是一个安装好了的程序包 在安装好hadoop和mysql的机器上面解压了 配置了就可以直接使用、

2012-09-19

su-3.0.5-efgh-signed

su-3.0.5-efgh-signed.zip

2012-09-05

PG88IMG.zip

进HBOOT它会自动读取这个名字的文件 刷机前刷这个是为了刷BOOT和RECOVERY

2012-09-05

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除