Nutch2.3+Hbase0.94环境搭建

1,修改nutch-site.xml
 <property>   
  <name>storage.data.store.class</name>   
  <value>org.apache.gora.hbase.store.HBaseStore</value>   
  <description>Default class for storing data</description>   
 </property>   
 <property>   
  <name>http.agent.name</name>   
  <value>JustinNutchAgent</value>   
 </property>
 <property>
  <name>plugin.includes</name>
  <value>protocol-httpclient|urlfilter-regex|index-(basic|more)|query-(basic|site|url|lang)|indexer-solr|nutch-extensionpoints|protocol-httpclient|urlfilter-regex|parse-(text|html|msexcel|msword|mspowerpoint|pdf)|summary-basic|scoring-opic|urlnormalizer-(pass|regex|basic)protocol-http|urlfilter-regex|parse-(html|tika|metatags)|index-(basic|anchor|more|metadata)</value>
 </property>
2,修改ivy.xml中包含org.apache.hadoop的对应的hadoop对应版本,我的对应版本为1.2.1
    <dependency org="org.apache.gora" name="gora-hbase" rev="0.5" conf="*->default" />
    <dependency org="org.apache.gora" name="gora-core" rev="0.5" conf="*->default"/>
    <dependency org="org.apache.gora" name="gora-compiler-cli" rev="0.5" conf="*->default"/>
    <dependency org="org.apache.gora" name="gora-compiler" rev="0.5" conf="*->default"/>
3,在gora.properties中增加
            gora.datastore.default=org.apache.gora.hbase.store.HBaseStore
4,修改build.xml修改hadoop-*test*.jar改为hadoop-*.jar
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值