big data
LANWENBING
这个作者很懒,什么都没留下…
展开
-
使用hadoop2.3+mahout+lucene将文本换算成vector
在http://www.daviddlewis.com/resources/testcollections/reuters21578/下载Reutersshu参照:http://www.shellsec.com/tech/63646.html原创 2014-07-11 12:43:46 · 3143 阅读 · 0 评论 -
Could not locate executable null 解决办法
问题导读:1.建一个MapReduce Project,运行时发现出问题:Could not locate executable null,该如何解决?2.Could not locate executabl ....\hadoop-2.2.0\hadoop-2.2.0\bin\winutils.exe in the Hadoop binaries.该如何解决?转载 2014-11-04 12:58:30 · 91234 阅读 · 1 评论 -
推荐结果
转载自:http://f.dataguru.cn/thread-268570-1-1.htmlpublic class ItemCFHadoop1 { private static final String HDFS = "hdfs://192.168.1.202:9000"; public static void main(String[] args) t转载 2014-11-10 11:35:30 · 1165 阅读 · 0 评论 -
hadoop + spark 探索
spark官网: http://spark.apache.org/releases/spark-release-1-0-0.html安装hadoop2.4到sparkguanwa原创 2014-07-10 15:39:24 · 685 阅读 · 0 评论 -
kmeans job eclipse
从92行开始,脚本完成了一系列操作:提取语料库中的文本保存到指定目录,把指定目录的文件转换为sequencefile,一气呵成! 实际上,mahout通过MapReduce执行的操作比上面的更详细。深入分析这一过程,可以了解到更多的处理细节。一起来分析它的处理步骤:将文本文件转换为sequencefile分词(DocumentProcessor::DocumentToke原创 2014-08-22 14:45:02 · 978 阅读 · 0 评论 -
hadoop2:no job control一般解决方法
Hadoop/bin/bash: line 0: fg:转载 2014-06-23 12:59:39 · 3566 阅读 · 2 评论 -
hadoop item based collaborative filtering use case
package org.mymahout.recommendation.hadoop;import java.io.File;import java.io.IOException;import java.util.Arrays;import java.util.List;import org.apache.hadoop.c原创 2014-06-24 11:37:01 · 779 阅读 · 0 评论 -
在windows版本下的eclipse中连接hadoop2.2跑job
首先要重写在YARNRUNNDER.java这个类原创 2014-07-22 16:58:10 · 1178 阅读 · 0 评论 -
oryx 推荐系统的使用
https://github.com/cloudera/oryx 在这里的readme原创 2014-08-01 10:34:39 · 8771 阅读 · 3 评论 -
国外已经完成的使用mahout的推荐引擎
http://easyrec.org/recommendation-engine 非常好用原创 2014-06-26 10:33:25 · 1082 阅读 · 0 评论 -
mapreduce job fail when submitted from windows machine
参照http://stackoverflow.com/questions/24075669/mapreduce-job-fail-when-submitted-from-windows-machine原创 2014-11-04 14:24:06 · 1232 阅读 · 0 评论