分享

Mahout安装与配置

gefieder 2015-4-24 21:29:29 发表于 安装配置 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 0 17488
问题导读:
1、如何安装Mahout?
2、Mahout使用准备?
3、kmeans算法的运用?




Mahout是Hadoop的一种高级应用。运行Mahout需要提前安装好Hadoop。Hadoop的安装网上很多,并不复杂,这里不再讲述,接下来阐述怎么安装Mahout。
1:下载二进制解压安装。
http://labs.renren.com/apache-mirror/mahout/0.7下载,我选择下载二进制包,直接解压及可。
  1. hadoop@ubuntu:~$ tar -zxvf mahout-distribution-0.7.tar.gz
复制代码

2:配置环境变量:在/etc/profile,/home/hadoop/.bashrc中添加如下红色信息

  1. #set java environment
  2. MAHOUT_HOME=/home/hadoop/mahout-distribution-0.7
  3. PIG_HOME=/home/hadoop/pig-0.9.2
  4. HBASE_HOME=/home/hadoop/hbase-0.94.3
  5. HIVE_HOME=/home/hadoop/hive-0.9.0
  6. HADOOP_HOME=/home/hadoop/hadoop-1.1.1
  7. JAVA_HOME=/home/hadoop/jdk1.7.0
  8. PATH=$JAVA_HOME/bin:$PIG_HOME/bin:$MAHOUT_HOME/bin:$HBASE_HOME/bin:$HIVE_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/conf:$PATH
  9. CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$HBASE_HOME/lib:$MAHOUT_HOME/lib:$PIG_HOME/lib:$HIVE_HOME/lib:$JAVA_HOME/lib/tools.jar
  10. export MAHOUT_HOME
  11. export PIG_HOME
  12. export HBASE_HOME
  13. export HADOOP_HOME
  14. export JAVA_HOME
  15. export HIVE_HOME
  16. export PATH
  17. export CLASSPATH
复制代码
3:启动hadoop,也可以用伪分布式来测试

4:mahout --help    #检查Mahout是否安装完好,看是否列出了一些算法

5:mahout使用准备
a.下载一个文件synthetic_control.data,下载地址http://archive.ics.uci.edu/ml/da ... thetic_control.data,并把这个文件放在$MAHOUT_HOME目录下。

b.启动Hadoop:$HADOOP_HOME/bin/start-all.sh

c.创建测试目录testdata,并把数据导入到这个tastdata目录中(这里的目录的名字只能是testdata)
  1. hadoop@ubuntu:~/$ hadoop fs -mkdir testdata #
  2. hadoop@ubuntu:~/$ hadoop fs -put /home/hadoop/mahout-distribution-0.7/synthetic_control.data testdata
复制代码
d.使用kmeans算法(这会运行几分钟左右)
  1. hadoop@ubuntu:~/$ hadoop jar /home/hadoop/mahout-distribution-0.7/mahout-examples-0.7-job.jar org.apache.mahout.clustering.syntheticcontrol.kmeans.Job
复制代码
e.查看结果
  1. hadoop@ubuntu:~/$ hadoop fs -lsr output
复制代码

如果看到以下结果那么算法运行成功,你的安装也就成功了。
clusteredPoints  clusters-0  clusters-1  clusters-10  clusters-2  clusters-3  clusters-4 clusters-5  clusters-6  clusters-7  clusters-8  clusters-9  data


资料来源:http://www.cnblogs.com/linjiqin/archive/2013/03/15/2961649.html
欢迎加入about云群371358502、39327136,云计算爱好者群,亦可关注about云腾讯认证空间||关注本站微信

没找到任何评论,期待你打破沉寂

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条