Mahout 安装
Mahout是Hadoop的一种高级应用。运行Mahout需要提前安装好Hadoop。
1.下载二进制解压安装包。
到http://labs.renren.com/apache-mirror/mahout/0.9下载,我选择下载二进制包,直接解压即可。
$:tar -zxvf mahout-distribution-0.9.tar.gz |
2.配置环境变量:在/etc/profile,/home/hadoop/.bashrc中添加如下红色信息
#set java environment MAHOUT_HOME=/home/hadoop/mahout-distribution-0.9 HADOOP_HOME=/usr/hadoop-2.2.0 JAVA_HOME=/home/jdk1.7.0 PATH=$JAVA_HOME/bin:$MAHOUT_HOME/bin:$HADOOP_HOME/bin:$PATH CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$MAHOUT_HOME/lib:$JAVA_HOME/lib/tools.jar export MAHOUT_HOME export HADOOP_HOME export JAVA_HOME export PATH export CLASSPATH |
3.启动hadoop,也可以用伪分布式测试
4.mahout --help #检查Mahout是否安装完成好,看是否列出一些算法。
5.mahout使用准备
(1).下载一个文件synthetic_control.data,下载地址http://archive.ics.uci.edu/ml/databases/synthetic_control/synthetic_control.data,并把这个文件放在$MAHOUT_HOME目录下。
(2).启动hadoop:$HADOOP_HOME/bin/start-all.sh
(3).创建测试目录testdata,并把数据导入到这个testdata目录中(这里的目录的名字只能有testdata)
$:hadoop fs -mkdir testdata $:hadoop fs -put /home/hadoop/mahout-distribution-0.7/synthetic_control.data testdata |
(4).使用kmeans算法(这会运行几分钟)
$: hadoop jar /home/hadoop/mahout-distribution-0.7/mahout-examples-0.7-job.jar org.apache.mahout.clustering.syntheticcontrol.kmeans.Job |
(5). 查看结果
$:hadoop fs -lsr output |
如果看到以下结果那么算法运行成功,你的安装也就成功了。
clusteredPoints clusters-0 clusters-1 clusters-10 clusters-2 clusters-3 clusters-4 clusters-5 clusters-6 clusters-7 clusters-8 clusters-9 data |
计算过程:
计算结果下图:
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 地球OL攻略 —— 某应届生求职总结
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· 提示词工程——AI应用必不可少的技术
· .NET周刊【3月第1期 2025-03-02】