本文介绍如何调通hadoop-computer-vision这个例子,该工程使用javacv在hadoop平台上处理图像,工程链接如下:
首先介绍运行环境:ubuntu-12-04-lts系统,安装了hadoop-2.3.0的单节点模式。关于如何安装双系统和hadoop在此省略,读者自行google相关教程,可参考如下链接:点击打开链接
以下的配置过程都是在命令行中完成,没有使用Eclipse等IDE,但是思路应该是差不多的。大致过程为:下载 hadoop-computer-vision工程;安装openCV;安装javaCV;运行工程中的例子。
首先下载工程,按照工程网站上的说明,在linux命令行中使用svn命令即可。
在下载后的 hadoop-computer-vision-read-only/hadoop-computer-vision文件夹中有readme,但是写的太简单,如果想直接粘贴到命令行里运行就能成功就太naive了。。。
../bin/hadoop fs -put input input
../bin/hadoop fs -rmr output</span>
这两步问题,但是hadoop-computer-vision.jar还没生成呢,下面就是如何编译java程序的问题了,这其中还涉及各种依赖,由于这部分当时没有详细记录下来,只说下大概。由于没接触过java开发,出错和走弯路是肯定的,读者自己搜解决方法。
关于命令行下如何编译运行java写的wordcount程序,可参考如下链接:点击打开链接
其中涉及的命令有:
javac:编译java程序,注意依赖的Classpath里有hadoop相关的.jar文件,path在哪里自己找。jar命令将生成的class打包成.jar。最后用 hadoop jar 命令运行之。