2017年07月_简一_hz

10月 09月 07月 02月 01月

原创 ActiveMQ学习笔记

AcitveMQ是作为一种消息存储和分发组件，涉及到client与broker端数据交互的方方面面，它不仅要担保消息的存储安全性，还要提供额外的手段来确保消息的分发是可靠的。ActiveMQ中有两种类型的消息模型点对点（point-to-point，简称PTP）Queue消息传递模型发布/订阅（publish/subscribe，简称pub/sub）Topic消息传递模型

2017-07-27 14:36:16 303

转载在Docker上使用Weave搭建Hadoop和Spark跨主机容器集群

转载自http://www.dockone.io/article/1047，感谢作者方圆小生功能和环境说明实际环境是开发使用的两台服务器，每个服务器上是三个集群容器节点，总共六个节点，使用weave实现跨主机的通信，并且利用小插件可以实现在局域网或者是在外网查看监控集群的webUI和开放7077等关键端口进行程序远程调试功能。目前网上跨主机的工具很多，我挑选的是使用普遍点和资料

2017-07-26 13:38:05 1158 1

转载 Hadoop和大数据：60款顶级开源工具

说到处理大数据的工具，普通的开源解决方案（尤其是Apache Hadoop）堪称中流砥柱。弗雷斯特调研公司的分析师Mike Gualtieri最近预测，在接下来几年，“100%的大公司”会采用Hadoop。Market Research的一份报告预测，到2011年，Hadoop市场会以58%的年复合增长率（CAGR）高速增长；到2020年，市场产值会超过10亿美元。IBM更是非常看好开源大数据

2017-07-20 11:20:10 496

原创 Hadoop/Eclipse - Exception NoClassDefFoundError: org/apache/hadoop/fs/FileSystem解决方法

今天在学习日志网站分析项目案例的时候遇上了一个问题，在此记录下解决方法。PS：具体项目操作大家请看Hadoop学习-日志网站分析项目案例里面讲的很具体项目，伟一步步照着来成功在自己的分布式hadoop环境下实现了，很感谢那个博客的作者。下面我讲下当我们遇到下面错误时该如何解决Exception in thread "main" java.lang.NoClassDefFoundEr

2017-07-19 17:32:57 6911

原创 HBase配置及API运行

昨天和今天我主要学习了下HBase,在此记录下自己的学习心得。初次接触HBase,发现它有自带的zookeeper;我原先是完全分布式安装了hadoop的，三台机器，不过我运行的时候暂时只开了两台，所以下面出现的例子都是只起了两台的哈。按理是要分开另外安装zookeeper比较好，而不是使用HBase自带的内部的zookeeper，原因大概就是如下所述（摘自百度知道一用户的回答，个人觉得他

2017-07-18 11:25:38 770

原创 Ubuntu16.04 Hive安装配置

说来自己断断续续自学大数据Hadoop已经有一段时间了，不过觉得还是晕乎乎的，各种看了就忘，好记性不如烂笔头，还是记录下吧，也希望能对后面自学的人能有所帮助。我的系统环境是Ubuntu16.04我安装的软件： Mysql Jdk1.8.0_121 apache-hive-2.1.1-bin mysql-connector-java-5.1.

2017-07-14 09:59:44 6322

centos Sublime Text3+package control+emmet

解压Sublime Text3，package control,emmet 运行sublime, preference->Browser packages, 将解压后的package control和emmet复制进去，重启sublime 重启之后还会看到左下角呈现 Loading PyV8 的提示，待其载入完毕，即可使用代码快速生成插件了

2016-10-11

Elliptic Curve Cryptography • majority of public-key crypto (RSA, D-H) use either integer or polynomial arithmetic with very large numbers/polynomials • imposes a significant load in storing and processing keys and messages • an alternative is to use elliptic curves • offers same security with smaller bit sizes • newer, but not as well analysed

2015-07-09