今天想在hadoop的项目里顺便把输出文件也整理了,写入数据库,就想着能不能整合进spring。一般来说,只要被spring框架整合的框架有扩展创建对象的接口都可以,可是,我刚接触hadoop,还不是很了解。就上spring官网查一下,结果没查到,看来hadoop应该不能像mybatis那样被spring接管了。
那么,不能整合,结合总可以吧。我把hadoop当成一个工具包,它只要负责处理数据就行。不过hadoop主要用于数据处理,适合分布式应用,结合spring,意味着只把hadoop当成一个辅助功能来用,所以专业的海量数据处理,项目还是采用分布式hadoop好,我这里纯属偷懒,节省代码,才结合spring,放在同一个项目中。
原理如下图所示: