2017年11月_大数据和云计算技术

转载薪资差一倍！Spark真的那么优于Hadoop吗？

薪资差一倍！Spark真的那么优于Hadoop吗？这几天在网上看到这么一个问题，贵州的大数据工程师年薪都40万不止？一下勾起了我的兴趣，今天就来简单分析下，到底是什么原因。贵州如今是大数据之都，而贵州大数据背后是马云的阿里云。先来看看马云爸爸的阿里巴巴的级别定义：•阿里薪资结构：一般是12+1+3=16薪•年底的奖金为0-6个月薪资，90%人可拿到3个月

2017-11-30 00:00:00 1103

转载大数据和云计算技术周报（第1期）

写在第1期周报Q1：周报反响如何？A1：实话说，第0期超出了我们的预期，前后6个同学以订阅的名义打赏，完全出乎我们的意料。有编辑直言，人生第一次收到稿费。谢谢各位同学的支持！另外说一句，请继续坚持打赏和支持！我们真的很喜欢红包砸来的感觉！Q2:收到红包，众编辑情绪有啥变化？A2:受到大家鼓励，众编辑纷纷表示：“如果不坚持，都不好意思了！”，另外我们的队伍进一步壮大，新增了蓝

2017-11-27 00:00:00 1036

转载 HBase 和 Cassandra的浅谈

一：简介关于hbase和cassandra的探讨，主要从多个方面来说，从最基本的一步步往深入的说，从最基本的部署运维，到支持特性，使用功能以及各自的优势；先从比较宏观的角度分析，HBase是基于Google的bigtable的论文实现的列式数据库，cap理论中更倾向于强调c（副本数据一致性）和p（分区容错性）。而Cassandra是号称dynamo 加上 bigtable（数据模型）的实现

2017-11-24 00:00:00 9722

转载 MySQL NDB Cluster实战

前言本文来自睿哲科技的张树杰同学分享MySQL NDB集群的基础知识和搭建，非常赞！希望越来越多的同学一起来分享，帮助他人，也收获成长，每季度分享排名第一的同学有惊喜哦。1概述MySQL Cluster是MySQL官方的解决方案，其实对于MySQL集群，有很多对应的解决方案，MySQL Cluster是其中的一种。MySQL Cl

2017-11-22 00:00:00 947

原创大数据和云计算技术周报（第0期）

写在第0期周报Q1：为什么要搞一个周报：A1：受众多社区日报、周报的启发（如湾区日报，ES日报等等），所以大数据和云计算技术社区经过众多讨论，也决定搞一个周报。目的很简单，营造分享的气氛，同时参与的同学能从中学到东西。Q2:为什么是第0期，不是从1开始吗？A2:程序员写代码不是上来就int i=0吗，从0开始也挺好。Q3:准备搞多久？A3:能坚持多久算多，怎

2017-11-20 00:00:00 1229 1

原创阿里的OceanBase解密

今天双11阿里的成交额又创新高，1682亿，支付峰值为25.6万笔/秒。从阿里的公布各种宣传稿来看，有一个细节，首次公布了数据库处理峰值为4200万次/秒。蚂蚁金服首席技术架构师、副总裁胡喜介绍，支付宝之所以在今年首次公布“数据库处理峰值”，是因为今年双11，支付宝首次把包括账务库在内的所有核心数据链，全部搬到了蚂蚁金服自主研发的数据库OceanBase上。Oc

2017-11-13 00:00:00 1486

原创起底AlphaGo历史

一、AlphaGo zero横空出世10月19日DeepMind在Nature上发表了名为Mastering the game of Go without human knowledge（不使用人类知识掌握围棋）的论文，在论文中，Deepmind展示了他们强大的新版本围棋程序“AlphaGo Zero”—— 仅经过三天训练，就能以100：0击败此前击败李世石的AlphaGo Lee

2017-11-06 00:00:00 4011

大数据和云计算技术