means

fumotvh3  于 2021-05-30  发布在  Hadoop
关注(0)|答案(0)|浏览(233)

是否可以使用hadoop并行(多核)运行mahout k-means算法?怎样?
mahout使用hadoop运行,但它只使用一个cpu:

mahout org.apache.mahout.clustering.syntheticcontrol.kmeans.Job --input testdata --output end1200_50 --numClusters 1200 --t1 1000 --t2 500 --maxIter 50
Running on hadoop, using /usr/local/hadoop/bin/hadoop and HADOOP_CONF_DIR=/usr/local/hadoop/etc/hadoop
MAHOUT-JOB: /usr/local/mahout/mahout-examples-0.10.1-job.jar
[...]

我的文件是hdfs格式的 hadoop fs -ls /user/root/testdata ```
Found 12 items
-rw-r--r-- 1 root supergroup 373560731 2015-06-26 07:51 /user/root/testdata/16773m.mat.txt
-rw-r--r-- 1 root supergroup 373819865 2015-06-26 07:51 /user/root/testdata/16786m.mat.txt
[...]

我的mapred-site.xml

暂无答案!

目前还没有任何答案,快来回答吧!

相关问题