- 博客(3)
- 收藏
- 关注
原创 分布式数据库原理解析
一,分布式数据库的简单了解我们目前使用的数据库中间件UDAL,据文档描述,底层使用的是阿里的开源Cobar,网上了解Cobar社区几年前早已经不更新了,现在比较火热的是Mycat中间件。UDAL与Mycat类似,此外根据自身业务需求,增加了全局序列,切片索引,日志,web统一管理界面等。1,核心问题—事务分布式数据库的核心问题的是事务的管理,Cobar是不支持分布式事务的,Mycat也只支持弱分布式
2017-12-09 14:26:36 15001 3
原创 开源数据处理框架Spark - 从入门到放弃
本节开始搭建我们的Spark开发环境了,编写一些简单的函数,打包成jar文件,然后放入到Spark环境中运行。根据上节的情况,接下来的内容力求更通俗易懂,至少看起不那么晦涩。本篇主要是安装步骤,不涉及原理讲解,但是开源项目的安装部署往往也是难点。在此之前,先闲扯一点题外话。这次的标题是入门到放弃,也是很多初学编程,或者想学习开源项目的同学所遇到的问题。刚开始很好奇并且信心满满,可是越往后越发现过程很
2017-12-05 22:20:05 4881 5
原创 数据分析处理开源框架杂谈
Spark?英文是电火花、火星,可以做动词,发出火星··· 停,干哈,英语知识讲座?你好,再见。少侠留步,这不百度说的嘛,我再看看,找到了: “Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架~”·····说人话?!咳
2017-12-02 15:19:41 1010
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人