2018年10月_bible_reader

12月 11月 10月 09月 08月 05月

转载【zookeeper】zookeeper入门

简介ZooKeeper是一个开源的分布式协调服务，由雅虎创建，是Google Chubby的开源实现。ZooKeeper的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来，构成一个高效可靠的原语集，并以一系列简单易用的接口提供给用户使用。ZooKeeper是一个典型的分布式数据一致性的解决方案。分布式应用程序可以基于它实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集...

2018-10-31 13:10:34 222

转载【zookeeper】zookeeper详解

场景一有这样一个场景：系统中有大约100w的用户，每个用户平均有3个邮箱账号，每隔5分钟，每个邮箱账需要收取100封邮件，最多3亿份邮件需要下载到服务器中(不含附件和正文)。用20台机器划分计算的压力，从多个不同的网路出口进行访问外网，计算的压力得到缓解，那么每台机器的计算压力也不会很大了。通过我们的讨论和以往的经验判断在这场景中可以实现并行计算，但我们还期望能对并行计...

2018-10-31 09:45:41 466

原创【Hadoop】Linux机器上面安装pyhdfs

Linux机器上安装pyhdfs1、准备依赖模块pyhdfs的安装依赖requests和simplejson两个模块，因此在安装pyhdfs的时候最好已经先安装了这两个模块。requests安装包比较容易获取，就不提供资源，pyhdfs的资源参考链接：https://download.csdn.net/download/bible_reader/10723577，simplejson的...

2018-10-16 13:11:20 1073

原创【Mac】Sublime Text 常用快捷键

Sublime Text 常用快捷键（MAC）符号说明⌘：command ⌃：control ⌥：option ⇧：shift ↩：enter ⌫：delete 打开/关闭/前往快捷键功能 ⌘⇧N 打开一个新的sublime窗口 ⌘N 新建文件 ⌘⇧W 关闭sublime，关闭所有文件 ⌘W 关闭当前文件 ⌘P 跳转、前往文件、前往项目、命令提示、前往metho...

2018-10-15 09:43:34 6113