- 博客(11)
- 资源 (1)
- 问答 (1)
- 收藏
- 关注
原创 第一个hadoop程序(java程序访问hadoop的hdfs文件系统中的文件)
1:hadoop2.7.3环境2:阿里云服务器centos6.5,ip是:47.88.14.1903:hadoop在伪分布式下运行的。4:具体配置文件如下:1)core-site.xml配置(ip地址最好不用localhost,不然不好测试) fs.defaultFS hdfs://47
2017-02-22 16:48:36 9914
原创 为什么要在eclipse中安装hadoop-eclipse-plugins插件?
1:hadoop-eclipse-plugins插件不是必须的,普通的java程序就可以访问hadoop的hdfs文件系统了。2:(插件是必须的,这个是一个错误的认识,具体请参考http://zy19982004.iteye.com/blog/2031172)。3:那么hadoop-eclipse-plugins有什么作用呢?1)对hadoop中的文件可视化。2)创建MapRedu
2017-02-22 16:32:02 3423
原创 eclipse配置hadoop-eclipse-plugin(版本hadoop2.7.3)
1:首先下载hadoop2.7.32:下载hadoop-eclipse-plugin-2.7.3.jar(注:自己百度,可以下载csdn上有下载)3:下载eclipse-mars-24: eclipse中安装hadoop-eclipse-plugin-2.7.3.jar插件。(注:自己百度,把包导入到eclipse的安装目录的plugins下重启eclipse就可以了)5:打开ec
2017-02-22 11:53:20 4818 2
原创 重新学习java网络编程
今天重新学了了java网络编程中的类和方法,大有收货。1:IP和端口的意义:IP对应主机,端口对应主机中的应用。2:InetAddress类的getByName(String hostname)方法,hostname可以为null,表示本地的host,也可以是本机的,或者局域网的机器名,还是可以广域网的域名。其实方法的注释才是最好的书籍。
2017-02-17 12:04:51 307
转载 Hadoop2.7.3 自带example wordCount摸索记录
http://blog.csdn.net/subiyet/article/details/52414654首先最最重要的写在最前面,也是我觉得个人踩得最深的坑,刚接触hadoop的人,缺少的认识:hdfs的理解:它是一个文件系统,跟linux的文件系统是类似的结构,拥有类似的语法,大概就是你在linux上ls查看文件列表,那么hdfs的无非就是hadoop fs -ls。hadoop的
2017-02-16 20:52:03 5531
转载 使用JOTM实现分布式事务管理(多数据源)
使用spring和hibernate可以很方便的实现一个数据源的事务管理,但是如果需要同时对多个数据源进行事务控制,并且不想使用重量级容器提供的机制的话,可以使用JOTM达到目的.JOTM的配置十分简单,spring已经内置了对JOTM的支持,一. 首先定义如上的两个bean,利用spring对JOTM进行初始化.二.接下来定义所需的数据源
2017-02-10 11:07:51 333
原创 企业是如何避免重发开发的,
比如像阿里,有很多部门,滴滴,高德地图,天猫,淘宝,支付宝,他们是如何整合的呢?天猫淘宝想要用到高德地图的信息的时候,API是怎么开放的?(如何区别对待阿里之外的企业使用高德地图的功能?)
2017-02-09 18:38:11 248
转载 分布式系统事务一致性解决方案
分布式系统事务一致性解决方案本文首发于InfoQ,版权所有,请勿转载!!!http://www.infoq.com/cn/articles/solution-of-distributed-system-transaction-consistency开篇在OLTP系统领域,我们在很多业务场景下都会面临事务一致性方面的需求,例如最经典的Bob给Smith转账的案例。传统的企业开发,
2017-02-09 17:53:08 248
原创 spring如何面向接口编程啊?
spring框架里面,我们常常是一个接口对应一个实现类,严重影响了java接口定义的初衷。那么如果我们在spring框架里面,一个接口定义了多个实现类,应该怎么操作呢?pbulic interface test{ public void print();}@service(name="test1")public class
2017-02-07 18:42:52 2028 1
转载 jquery对象和DOM对象相互转换
刚开始学习jquery,可能一时会分不清楚哪些是jQuery对象,哪些是DOM对象。至于DOM对象不多解释,我们接触的太多了,下面重点介绍一下jQuery,以及两者相互间的转换。什么是jQuery对象?---就是通过jQuery包装DOM对象后产生的对象。jQuery对象是jQuery独有的,其可以使用jQuery里的方法。 比如: $("#test").html() 意思是指:获
2017-02-03 18:38:56 276
如何看待并发无处不在这个问题?
2016-11-07
TA创建的收藏夹 TA关注的收藏夹
TA关注的人