- 博客(10)
- 资源 (19)
- 收藏
- 关注
转载 HBase 在淘宝的应用和优化小结
本文来自于NoSQLFan联合作者@koven2049,他在淘宝从事Hadoop及HBase相关的应用和优化。对Hadoop、HBase都有深入的了解,本文就是其在工作中对HBase的应用优化小结,分享给大家。原文地址:http://walkoven.com/?p=57文章PDF下载:http://walkoven.com/hbase:optimization and apply summ
2012-07-30 17:49:34 2564
转载 HBase 性能调优
因官方Book Performance Tuning部分章节没有按配置项进行索引,不能达到快速查阅的效果。所以我以配置项驱动,重新整理了原文,并补充一些自己的理解,如有错误,欢迎指正。配置优化zookeeper.session.timeout默认值:3分钟(180000ms)说明:RegionServer与Zookeeper间的连接超时时间。当超时时间到后,ReigonServer
2012-07-30 17:06:32 1747
转载 关系型数据库到HBase的数据储存方式变迁
如今Bigtable型(列族)数据库应用越来越广,功能也很强大。但是很多人还是把它当做关系型数据库在使用,用原来关系型数据库的思维建表、存储、查询。本文以hbase举例讲述数据模式的变化。传统关系型数据库(mysql,oracle)数据存储方式主要如下:图一上图是个很典型的数据储存方式,我把每条记录分成3部分:主键、记录属性、索引字段。我们会对索引字段建立索引,达到二级索引的效果。
2012-07-30 17:03:35 4494
转载 淘宝数据魔方技术架构解析
淘宝网拥有国内最具商业价值的海量数据。截至当前,每天有超过30亿的店铺、商品浏览记录,10亿在线商品数,上千万的成交、收藏和评价数据。如何 从这些数据中挖掘出真正的商业价值,进而帮助淘宝、商家进行企业的数据化运营,帮助消费者进行理性的购物决策,是淘宝数据平台与产品部的使命。为此,我们进行了一系列数据产品的研发,比如为大家所熟知的量子统计、数据魔方和淘宝指数等。尽管从业务层面来讲,数据产品的研发
2012-07-30 17:01:32 1286
转载 分布式数据库 HBase
HBase – Hadoop Database,是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase是Google Bigtable的开源实现,类似Google Bigtable利用GFS作为其文件存储系统,HBase利用Hadoop HDFS作为其文件存储系统;Google运行MapReduce来处理Bi
2012-07-30 16:59:28 1079
转载 关于Hadoop你不得不知道的12个事实
【IT168 评论】现如今,Apache Hadoop已经无人不知无人不晓。当年雅虎搜索工程师Doug Cutting开发出这个用以创建分布式计算机环境的开源软件库,并以自己儿子的大象玩偶为其命名的时候,谁能想到它有一天会占据“大数据”技术的头把交椅呢。 虽然Hadoop伴随大数据一同火爆起来,但相信还是有许多用户对于它不甚了解。在上周名的TDWI解决方案峰会中, TDWI研究主任兼行业分析
2012-07-26 18:19:45 1699
转载 大数据新挑战:如何构建成功的IT策略
大数据时代即将到来,如何开发出一套成功的企业IT管理策略,是摆在众CIO面前的挑战话题。想要在大数据时代获得信息化的成功,CIO要将IT团队的数据、善于分析和可视化的工具、专业的数据处理和识别模式结合在一起。什么是大数据?Gartner给出的定义有三个主要特征:大数据量,处理速度,类型和非结构化数据源(如社会互动、视频、音频)。如今在企业中,特别是大中型企业,产生了很多的数据集,如此庞大和多样
2012-07-22 23:18:12 2908
原创 Multi-statement transaction required more than 'max_binlog_cache_size' bytes of storage
最近在整一个通讯录的关系,数据量大约是40E当把文件导入到数据库的时候 遇到这这个问题 错误信息:Multi-statement transaction required more than 'max_binlog_cache_size' bytes of storage; increase this mysqld variable and try again解决方法如
2012-07-20 20:50:02 9049
转载 常用数据库的备份与恢复的方法
总结下各个数据库的 备份与恢复的方法 (有待补充)---------------------Oracle------------------------备份:exp user/password@orcl file='/app/2012.dmp'恢复:imp user/password@orcl fromuser=ufidanc touser=pm file='/app/2
2012-07-12 17:19:52 1576
转载 MapReduce和并行数据库,朋友还是敌人?
在2010年1月的ACM上,有两篇文章非常吸引人注意。一篇文章是Google的Jeffrey Dean、Sanjay Ghemawat发表的标题为《MapReduce:一个灵活的数据库处理工具》,另一篇文章是Michael Stonebraker、Daniel Abadi、David J. DeWitt、Sam Madden、Erik Paulson、Andrew Pavlo、Alexander
2012-07-02 16:50:48 1611
深入理解MySQL核心技术(中文PDF)
2013-03-22
zookeeper 3.4.3安装包
2012-11-30
X-Win32 2012 安装文件
2012-11-06
redis安装包
2012-10-23
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人