- 博客(5)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 windows编译hadoop 2.x Hadoop-eclipse-plugin插件
Hadoop2.x之后没有Eclipse插件工具，我们就不能在Eclipse上调试代码，我们要把写好的java代码的MapReduce打包成jar然后在Linux上运行，所以这种不方便我们调试代码，所以我们自己编译一个Eclipse插件，方便我们在我们本地上调试，经过hadoop1.x的发展，编译hadoop2.x版本的eclipse插件比之前简单多了。接下来我 们开始编译Hadoop-eclipse-plugin插件，并在Eclipse开发Hadoop
2014-12-23 08:59:35
11921
4
原创 解决Exception: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z 等一系列问题
Windows下的 Eclipse上调试Hadoop2代码，所以我们在windows下的Eclipse配置hadoop-eclipse-plugin-2.6.0.jar插件，并在运行Hadoop代码时出现了一系列的问题，搞了好几天终于能运行起代码。接下来我们来看看问题并怎么解决，提供给跟我同样遇到的问题作为参考。
2014-12-20 15:38:45
62741
30
原创 Hadoop2 伪分布式部署
Hadoop的框架最核心的设计就是：HDFS和MapReduce。HDFS为海量的数据提供了存储，HDFS有高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上；而且它提供高吞吐量（high throughput）来访问应用程序的数据，适合那些有着超大数据集（large data set）的应用程序。HDFS放宽了（relax）POSIX的要求，可以以流的形式访问（streaming access）文件系统中的数据，则MapReduce为海量的数据提供了计算。Hadoop 容易开发和运行处理大
2014-12-19 08:42:52
1958
原创 Nginx+Tomcat+Memcached 实现集群部署时Session共享
我们系统经常要保存用户登录信息，有Cookie和Session机制，Cookie客户端保存用户信息，Session在服务端保存用户信息，如果浏览器不支持Cookie或者用户把Cookie禁掉了，Cookie就用不了，还有不同的浏览器采用不用方式保存Cookie,所以我们采用Session服务端来保存，上一节我们有介绍了Tomcat集群部署，怎么样集群的Tomcat对同个用户请求的都能获取保存在Session的用户信息，采用了Memcached管理Session，Memcached 是一个高性能的分布式内存对
2014-12-11 16:59:49
3887
原创 Nginx 与Tomcat 实现动静态分离、负载均衡
Nginx一个高性能的HTTP和反向代理服务器， 具有很高的稳定性和支持热部署、模块扩展也很容易。当遇到访问的峰值，或者有人恶意发起慢速连接时，也很可能会导致服务器物理内存耗尽频繁交换，失去响应，只能重启服务器，Nginx采取了分阶段资源分配技术，处理静态文件和无缓存的反向代理加速，实现了负载均衡和容错，在这样高并发的访问情况下，能经受起高并发的处理。
2014-12-10 15:40:26
11477
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人