Mahout Random Forests

最新推荐文章于 2024-07-15 10:16:12 发布
最新推荐文章于 2024-07-15 10:16:12 发布
阅读量654 收藏
点赞数
分类专栏： Mahout 文章标签： hadoop mahout
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Wee_Mita/article/details/52577318
版权 
hadoop jar /usr/mahout/mahout-examples-0.12.0-job.jar org.apache.mahout.classifier.df.tools.Describe -p /Data/rf/data -f /RF/datainfo -d 41 N L

-p是文件的输入文件 -f是描述文件的输出 -d 对每一个属性列进行描述 41 N 表示：连续的41个属性都是连续的 L表示输出类别，C表示离散，I表示忽略。

hadoop jar /usr/mahout/mahout-examples-0.12.0-job.jar org.apahce.mahout.classifier.df.mapreduce.BuildForest -d /Data/rf/data -ds /RF/datainfo -sl 10 -ms 3 -p -t 20 -o /RF/forest

-sl 建树过程中随机选择的属性个数 -ms 当数据集容量小于3时产生叶子节点而不是递归建树，-p 使用mapreduce模式 -t生成5棵决策树组件随机森林。

hadoop jar /usr/mahout/mahout-examples-0.12.0-job.jar org.apahce.mahout.classifier.df.mapreduce.TestForest -i /Data/rf/data -ds /RF/datainfo -m/RF/forest -mr -a -o /RF/result

-m上一步建立的模型路径，-mr 设置为MapReduce模式

第二步和第三步在Mahout 0.8以上版本中没有，Mahout 0.8以下版本不支持Hadoop 2.0

狮锅艺
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Mahout RandomForest Example使用步骤
04-07
NULL 博文链接：https://irwenqiang.iteye.com/blog/1561733
Mahout random forest 随机森林小案例
Ichimaru_Gin_的博客
01-24 1622
写在前面 菜鸟真的需要耗费大量的时间各种试才能解决问题啊。。。~~o(>_ 首先介绍一下我尝试的过程，大家可以参考着排排错。 1. 我最初用的是mahout最新的0.13版本，想要按照官方给出的案例（Classifying with random forests）测试并学习一下随机森林的用法，但是发现根本没办法按照这个官方文档去做。虽然官方给出的0.13版本API的文档，但是它的测试用例还是
mahout random forests分布式策略
星.云计算
09-29 228
关于mahout中的random forests算法在前面已经分析过，这里简要说下其并行策略。 刚开始的时候，我以为这个算法好像没啥并行的地方，一开始就是对全部原始数据进行分析，也没有对原始数据进行分片。然后它的job任务也只有一个mapper，这样如何才能多建立几个mapper？然后这样才能达到几个节点并行吧（一个节点计算一个mapper，这样效率才高过一个节点计算多个mapper）。但是如果...
Mahout-RandomForests
公子的专栏
01-20 1725
1. 数据下载与准备 1.1 下载地址为http://nsl.cs.unb.ca/NSL-KDD/ 1.2打开下载的数据，删除其中以@开头的数据  1.3 将数据上传到hdfs # $HADOOP_HOME/bin/hadoop fs -mkdir /testdata # $HADOOP_HOME/bin/hadoop fs -put /usr/local/mahout/data/
Random forests， 随机森林，online random forests
weixin_30408739的博客
05-10 207
Random Forests (随机森林） 随机森林的思想很简单，百度百科上介绍的随机森林算法比较好理解。 在机器学习中，随机森林是一个包含多个决策树的分类器， 并且其输出的类别是由个别树输出的类别的众数而定。 Leo Breiman和Adele Cutler发展出推论出随机森林的算法。 而 "Random Forests" 是他们的商标。 这个术语是1995年由贝尔实验室的Tin ...
Mahout源码
03-15
- **分类（Classification）**: Mahout 提供了多种监督学习算法，如朴素贝叶斯（Naive Bayes）、决策树（Decision Trees）和随机森林（Random Forests），用于预测目标变量的值。 - **聚类（Clustering）**: 包括K-...
mahout 0.5
05-11
Mahout支持多种分类算法，如朴素贝叶斯（Naive Bayes）、决策树（Decision Trees）、随机森林（Random Forests）等。这些算法可用于文本分类、垃圾邮件过滤等任务，帮助自动对数据进行预定义的类别划分。 **4. 聚类...
Mahout in Action
02-07
Bayes 275 ■ Strength in elaborate structure: using random forests 276 14.6 Classifying the 20 newsgroups data with naive Bayes 276 Getting started: data extraction for naive Bayes 276 ■ Training the...
Mahout随机森林算法--分类无标签数据
fansy1990的专栏
11-02 6185
开发环境：Intellij IDEA14 、Maven3.2、JDK1.7、Hadoop2.6 、mahout0.10源码下载及运行参考：https://github.com/fansy1990/randomforest_classify 设计思路：Mahout 随机森林算法（Random Forest）利用建立好的模型（BuildForest的输出结果）以及描述文件（Describe的输出结果）
在CDH3上运行mahout的random forest算法时的异常处理
baiyunl的专栏
11-30 200
在应用apache mahout中的random forest分类的时候，报java.lang.IllegalStateException: java.io.EOFException异常。具体如下图：   这个错误发生是在训练出模型后，将模型存储的时候。原因是cloudera的hadoop版本在mapreduce 任务运行完后，会生成一个_SUCCESS目录，这将导致如上异常。    ...
Mahout---随机森林算法示例
Star-Technology
07-06 3057
Step 1： 准备样本集，由于数据太多了，所以只截取部分数据1,1.52101,13.64,4.49,1.10,71.78,0.06,8.75,0.00,0.00,1 2,1.51761,13.89,3.60,1.36,72.73,0.48,7.83,0.00,0.00,1 3,1.51618,13.53,3.55,1.54,72.99,0.39,7.78,0.00,0.00,1 4,1.517
mahout源码分析之Decision Forest 三部曲之一Describe
星.云计算
09-20 164
Mahout版本：0.7，hadoop版本：1.0.4，jdk：1.7.0_25 64bit。 Mahout中实现决策树算法的有两个（quick start），分别是Partial Implementation和Breiman Example，可以点击链接到相应的网页查看其官方实例。其中Breiman Example是单机版的，而Partial Implementation是可以使用ma...
Mahout笔记
狮锅艺
09-14 2986
学习Mahout的一些心得和笔记
Hadoop下Mahout配置
狮锅艺
08-27 1081
一、下载Mahout http://mahout.apache.org/ 下载和Hadoop版本对应的Mahout版本 二、解压 tar -zxvf 安装包 三、配置环境变量 打开/etc/profile # Mahout Environment export MAHOUT_HOME=/usr/mahout export MAHOUT_CONF_DIR=$MA
Maven实践（零）---Maven安装（Mahout）
狮锅艺
08-30 977
Maven和Mahout的安装和注意事项
Mahout Canopy+K-Means
狮锅艺
09-19 924
mahout进行聚类分析；首先采用Canopy寻找聚类中心，然后采用Kmeans进行聚类。
Mahout Bayesian
狮锅艺
09-18 372
Mahout 贝叶斯 命令和参数
Hadoop3：HDFS-查看logs文件，排查NameNode故障原因。
最新发布
Brave_heart4pzj的博客
07-15 476
Hadoop
Mahout算法详解与实战指南
"Mahout算法解析与案例实战" 本书主要涵盖了Apache Mahout这一机器学习库的基础知识和实际应用。Mahout是基于Java开发的，旨在提供可扩展的、易用的机器学习算法，它广泛应用于大数据处理领域，尤其与Apache Hadoop...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值