博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
mahout安装
阅读量:5050 次
发布时间:2019-06-12

本文共 1651 字,大约阅读时间需要 5 分钟。

mahout是hadoop的一种高级应用。运行mahout需要提前安装好hadoop。hadoop的安装网上很多。而且也不复杂,这里不再讲述。这里默认hadoop已经安装完成。

1:下载二进制解压安装。

到http://labs.renren.com/apache-mirror/mahout/0.5/ 下载,我选择下载二进制包,直接解压及可。

2:配置环境变量:HADOOP_HOME,HADOOP_CONF_DIR,MAHOUT_HOME,格式如下

export HADOOP_HOME=/usr/local/hadoop-0.20.205.0

export HADOOP_CONF_DIR=/usr/local/hadoop-0.20.205.0/conf

export MAHOUT_HOME=/usr/local/mahout-distribution-0.5

export PATH=$HADOOP_HOME/bin:$MAHOUT_HOME/bin:$PATH

3:(注意)

网上都说运行bin/mahout --help来查看一些算法以及是否安装成功,这其实是有问题的。bin/mahout --help有bug,有时候运行会提示Unknown program '--help' chosen.这其实并不代表安装出了问题。

你可以继续试下bin/mahout -h或者bin/mahout kmeans --help.应该说如果配置没有问题的话bin/mahout kmeans --help应该是可以正常运行的。

4:准备

  1.下载一个文件synthetic_control.data,下载地址http://archive.ics.uci.edu/ml/databases/synthetic_control/synthetic_control.data,并把这个文件放在$MAHOUT_HOME目录下。

  2.启动Hadoop:$HADOOP_HOME/bin/start-all.sh

  3.在$MAHOUT_HOME目录下创建测试目录testdata,并把数据导入到这个tastdata目录中(这里的目录的名字只能是testdata)

    $HADOOP_HOME/bin/hadoop fs -mkdir testdata

    $HADOOP_HOME/bin/hadoop fs -put  $MAHOUT_HOME/synthetic_control.data $MAHOUT_HOME/testdata

  4.使用kmeans算法(这会运行1分钟左右)

    $HADOOP_HOME/bin/hadoop jar $MAHOUT_HOME/mahout-examples-0.5-job.jar org.apache.mahout.clustering.syntheticcontrol.kmeans.Job

  5.查看结果

    $HADOOP_HOME/bin/hadoop fs -lsr output

    $HADOOP_HOME/bin/hadoop fs -get output $MAHOUT_HOME/examples

    $cd $MAHOUT_HOME/examples/output

    $ ls

    如果看到以下结果那么算法运行成功,你的安装也就成功了.

    clusteredPoints  clusters-0  clusters-1  clusters-10  clusters-2  clusters-3  clusters-4

    clusters-5  clusters-6  clusters-7  clusters-8  clusters-9  data

      

转载于:https://www.cnblogs.com/xuegang/archive/2011/10/24/2222678.html

你可能感兴趣的文章
trunk的作用是??
查看>>
【POJ - 1426】Find The Multiple(dfs)
查看>>
C# webService 读取txt/Excel/SQL/Orcal的方法
查看>>
运算符
查看>>
django学习之- CSRF及中间件
查看>>
庆祝E8.Net工作流平台运行版注册数量超过2000,特提供下载
查看>>
20家银行遇涉企收费限令 四因素仍在加剧“钱贵”
查看>>
Appium小试
查看>>
Pycharm+Python+Unittest+HTMLTestRunner编写Android自动化测试一(环境搭建)
查看>>
手机端html5触屏事件(touch事件)
查看>>
4:面向对象高级
查看>>
STM32的CRC32 软件实现代码
查看>>
LPC-LINK 2 LPC4370 简化线路图
查看>>
【模板】关于vector的lower_bound和upper_bound以及vector基本用法 STL
查看>>
linux c动态库编译好了,不能用。有些方法报(undefined reference)错误。
查看>>
在CentOS 6.5 中安装JDK 1.7 + Eclipse并配置opencv的java开发环境(二)
查看>>
docker 安装与卸载
查看>>
“搜狐微博零估值”用意何在
查看>>
如何区分 OpenStack Neutron Extension 和 Plugin
查看>>
简述人工智能发展的先决条件
查看>>