关闭

Mahout学习之Mahout简介、安装、配置、入门程序测试

标签: Mahout数据挖掘
2862人阅读 评论(9) 收藏 举报
分类:

原文地址:http://blog.csdn.net/aaronhadoop/article/details/24577221

一、Mahout简介

查了Mahout的中文意思——驭象的人,再看看Mahout的logo,好吧,想和小黄象happy地玩耍,得顺便陪陪这位驭象人耍耍了...

附logo:

(就是他,骑在象头上的那个Mahout) 


步入正文啦:

       Mahout 是一个很强大的数据挖掘工具,是一个分布式机器学习算法的集合,包括:被称为Taste的分布式协同过滤的实现、分类、聚类等。Mahout最大的优点就是基于hadoop实现,把很多以前运行于单机上的算法,转化为了MapReduce模式,这样大大提升了算法可处理的数据量和处理性能。

在Mahout实现的机器学习算法:

算法类

算法名

中文名

分类算法

Logistic Regression

逻辑回归

Bayesian

贝叶斯

SVM

支持向量机

Perceptron

感知器算法

Neural Network

神经网络

Random Forests

随机森林

Restricted Boltzmann Machines

有限波尔兹曼机

聚类算法

Canopy Clustering

Canopy聚类

K-means Clustering

K均值算法

Fuzzy K-means

模糊K均值

Expectation Maximization

EM聚类(期望最大化聚类)

Mean Shift Clustering

均值漂移聚类

Hierarchical Clustering

层次聚类

Dirichlet Process Clustering

狄里克雷过程聚类

Latent Dirichlet Allocation

LDA聚类

Spectral Clustering

谱聚类

关联规则挖掘

Parallel FP Growth Algorithm

并行FP Growth算法

回归

Locally Weighted Linear Regression

局部加权线性回归

降维/维约简

Singular Value Decomposition

奇异值分解

Principal Components Analysis

主成分分析

Independent Component Analysis

独立成分分析

Gaussian Discriminative Analysis

高斯判别分析

进化算法

并行化了Watchmaker框架

 

推荐/协同过滤

Non-distributed recommenders

Taste(UserCF, ItemCF, SlopeOne)

Distributed Recommenders

ItemCF

向量相似度计算

RowSimilarityJob

计算列间相似度

VectorDistanceJob

计算向量间距离

非Map-Reduce算法

Hidden Markov Models

隐马尔科夫模型

集合方法扩展

Collections

扩展了java的Collections类


二、Mahout安装、配置 

一、下载Mahout
http://archive.apache.org/dist/mahout/

二、解压
tar -zxvf mahout-distribution-0.9.tar.gz

三、配置环境变量
3.1、配置Mahout环境变量
# set mahout environment
export MAHOUT_HOME=/home/yujianxin/mahout/mahout-distribution-0.9
export MAHOUT_CONF_DIR=$MAHOUT_HOME/conf
export PATH=$MAHOUT_HOME/conf:$MAHOUT_HOME/bin:$PATH
3.2、配置Mahout所需的Hadoop环境变量
 # set hadoop environment
export HADOOP_HOME=/home/yujianxin/hadoop/hadoop-1.1.2 
export HADOOP_CONF_DIR=$HADOOP_HOME/conf 
export PATH=$PATH:$HADOOP_HOME/bin
export HADOOP_HOME_WARN_SUPPRESS=not_null

四、验证Mahout是否安装成功
        执行命令mahout。若列出一些算法,则成功,如图:
        
       
五、使用Mahout 之入门级使用
5.1、启动Hadoop
5.2、下载测试数据
           http://archive.ics.uci.edu/ml/databases/synthetic_control/链接中的synthetic_control.data
5.3、上传测试数据
hadoop fs -put synthetic_control.data /user/root/testdata
5.4  使用Mahout中的kmeans聚类算法,执行命令:
mahout -core  org.apache.mahout.clustering.syntheticcontrol.kmeans.Job
花费9分钟左右完成聚类 。 
5.5 查看聚类结果
    执行hadoop fs -ls /user/root/output,查看聚类结果。

齐活,收工。Mahout继续学习中......

0
0
查看评论

Mahout 安装配置及一个简单测试

下载地址 http://archive.apache.org/dist/mahout/
  • wljk506
  • wljk506
  • 2016-11-24 16:57
  • 1007

Mahout学习之Mahout简介、安装、配置、入门程序测试

标签: mahout 学习 mahout | 发表时间:2014-04-27 10:56 | 作者:wl101yjx 分享到: 出处:http://blog.csdn.net 一、Mahout简介 查了Mahout的中文意思——驭象的人...
  • u014651098
  • u014651098
  • 2014-06-10 23:34
  • 503

ubuntu 下mahout 的安装配置

1安装环境 系统/软件明称 版本 下载地址 备注 hadoop 0.20.2 http://mirror.esocc.com/apache/hadoop/common/ mahout 0.4 http://mirrors.cnnic.cn/apache/mahout/...
  • u012373815
  • u012373815
  • 2015-06-12 19:03
  • 1098

Mahout对于GroupLens数据定制的推荐引擎

Mahout对于GroupLens数据定制的推荐引擎
  • u012965373
  • u012965373
  • 2015-05-11 15:58
  • 985

mahout入门指南之mahout单机版推荐算法

mahout入门指南之mahout单机版推荐算法   鄙人最近在研究mahout,网上找了一些入门资料来看,发现都整理的比较乱。折腾了一番,终于搞清楚了。为了让新手们较快入门,决定总结分享一下,写此入门指南。   mahout是什么? mahout是一个机器学习库,里面实现了一些...
  • linger2012liu
  • linger2012liu
  • 2014-12-06 14:50
  • 3559

mahout入门之编写第一个基于用户的推荐程序

首先创建一个java工程,导入必要的jar包,工程结构类似下图: intro.txt测试数据如下: 1,101,5.0 1,102,3.0 1,103,2.5 2,101,2.0 2,102,2.5 2,103,5.0 2,104,2.0 3,101,2.5 3,104,4.0 3,105,...
  • xiao_jun_0820
  • xiao_jun_0820
  • 2014-12-23 16:04
  • 1921

Mahout学习之Mahout简介、安装、配置、程序测试

一、Mahout简介 查了Mahout的中文意思——驭象的人,再看看Mahout的logo,好吧,想和小黄象happy地玩耍,得顺便陪陪这位驭象人耍耍了... 附logo: (就是他,骑在象头上的那个Mahout) 步入正文:        Maho...
  • wl101yjx
  • wl101yjx
  • 2014-04-27 10:56
  • 3198

零基础搭建单机Mahout、简单程序的运行

概述: 1、Mahout是Apache的一个开源项目。 2、提供了机器学习的若干经典算法。比如基于用户的推荐、基于内容的推荐算法。 3、它是Hadoop家族中的一员,非常重要的一员。 参考文章: 1、 零基础学习Hadoop https://www.zhihu.com/questio...
  • qq_23617681
  • qq_23617681
  • 2016-03-03 16:46
  • 787

intellij idea 安装mahout_in_action项目

1、安装maven,配置maven环境变量 2、创建一个新的Maven Module File->new->project from existing source,然后在树状结构中选择你要导入的pom.xml(pom.xml即是maven项目的配置文件)
  • daijiguo
  • daijiguo
  • 2016-03-05 13:00
  • 722

Mahout快速入门教程

Mahout 是一个很强大的数据挖掘工具,是一个分布式机器学习算法的集合,包括:被称为Taste的分布式协同过滤的实现、分类、聚类等。Mahout最大的优点就是基于hadoop实现,把很多以前运行于单机上的算法,转化为了MapReduce模式,这样大大提升了算法可处理的数据量和处理性能。 一、...
  • jediael_lu
  • jediael_lu
  • 2015-03-07 16:20
  • 5472
    我的微信公众号

    作者公众号:凡人机器学习

    凡人机器学习

    机器学习微信交流群
    为了方便大家学习与交流,凡人云近日已开通机器学习社群! 分享“凡人机器学习”公众号名片到40人以上的大群并截图给小助手,小助手就会拉你入群 在这里你可以得到: 1.各种学术讨论 2.最新的资料分享 3.不定期的征文以及联谊活动! 小助手微信号:meiwznn
    作者新书《机器学习实践应用》

    主要讲述算法和业务的结合,适合初学者

    机器学习实践应用

    京东地址

    个人资料
    • 访问:843917次
    • 积分:11271
    • 等级:
    • 排名:第1682名
    • 原创:236篇
    • 转载:40篇
    • 译文:0篇
    • 评论:460条
    博客专栏
    统计