2016年06月_开心大魔豆

12月 11月 09月 06月 05月

转载 Kafka技术内幕：消费者（高级和低级API）和协调者

生产者发送消息时在客户端就按照节点和Partition进行分组，属于同一个目标节点的多个Partition会作为同一个请求传送到服务端，作为目标节点的服务端也可以处理来自不同生产者客户端的请求。如果从网络层通信来看，客户端和服务端都会使用队列的方式确保顺序地客户端发送请求，服务端接收请求，服务端发送响应，客户端接收响应。从存储层来看，生产者会将消息分发到不同节点的不同Partition上，服务端的

2016-06-02 13:22:22 8911

原创 golang 构建web应用

1、介绍涵盖内容：为载入和保存方法创建一个数据结构体引用http包来创建一个web应用引用template包来处理HTML模板引用regexp包来验证用户的输入引用闭包操作可能涉及到的知识：设计经验明白基础的web技术（HTTP，HTML）一些UNIX命令行知识2、你要有一个可以运行Go语言的计算机或虚拟机，怎么样安装Go，请参考安装G

2016-06-16 20:17:18 1864

原创 docker系列-初识

是

2016-06-14 14:15:51 323

原创 linux 环境 mysql 远程登录配置

1、登陆数据库。mysql -uroot -p（密码）。2、2、创建用户用来远程连接GRANT ALL PRIVILEGES ON *.* TO 'itoffice'@'%' IDENTIFIED BY 'itoffice' WITH GRANT OPTION;（第一个itoffice表示用户名，%表示所有的电脑都可以连接，也可以设置某个ip地址运行连接，第二个it

2016-06-14 14:13:57 400

原创 centos 安装mysql最新版mysql

Step1: 检测系统是否自带安装mysql# yum list installed | grep mysqlStep2: 删除系统自带的mysql及其依赖命令：# yum -y remove mysql-libs.x86_64Step3: 给CentOS添加rpm源，并且选择较新的源命令：# wget dev.mysql.com/get/mysql-com

2016-06-03 16:54:07 764

原创 spark环境搭建，伪分布式、集群

spark集群环境搭建，整理中

2016-06-02 17:19:14 492

原创大数据架构

Big Data非常复杂，涉及到的技术繁多。我们常“耳闻”的技术，如果MapReduce, Hadoop等处于哪一层次，下图会给你一个整体印象。图片：databricks.jpg下面是常见的技术简介：HBase ：是一个分布式的、面向列的开源数据库。其设计理念源自谷歌的 BigTable，用 Java 语言编写而成。MongoDB ：是目前非常流行的一种非关

2016-06-02 13:41:50 475