首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何使用基于KNN的项目推荐从命令行运行mahout?

问如何使用基于KNN的项目推荐从命令行运行mahout?
EN

Stack Overflow用户
提问于 2014-05-08 21:30:57
回答 1查看 1.2K关注 0票数 0

我还是新手,还在想办法解决问题。

我正在尝试使用运行在hadoop集群(分布式推荐程序)中的mahout0.8运行一个基于KNN的推荐程序。我使用的是mahout0.8,所以KNN是不推荐使用的,但是它仍然是可用的(至少当我用java代码制作它时)

我有几个问题:

  1. 基本上有两个mahout实现,这是真的吗?分布式(从命令行运行)不分发(从jar文件运行)
  2. “求和”(1)是正确的,是否支持从命令行运行基于KNN的推荐?有人能给我一个方向吗?
  3. Assumming (1)是错误的,我如何在java (我正在使用eclipse)中构建运行在hadoop集群(分布式)中的推荐程序?

谢谢!

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2014-05-09 22:19:41

KNN正被废弃,因为它正被基于项和基于用户的共生推荐器以及ALS推荐器所取代,后者更好,更现代。

  1. 是的,但并不是所有的代码都有一个CLI接口。在大多数情况下,Mahout中的CLI作业是Hadoop/分布式作业,它们在HDFS中为输出生成文件。可以使用自己的代码从jar文件中运行这些文件,就像您必须使用本地/非分布式/非Hadoop版本一样,这些版本没有CLI。内存中的推荐程序要求您输入用户ID才能获得recs,因此您必须编写代码才能这样做。Hadoop版本确实有一个CLI,因为它们预先计算了所有用户的所有recs并将它们放入文件中。您可能会将它们插入到DB中,或者以其他方式提供服务。
  2. 不,据我所知,命令行只支持基于用户的、基于项目的推荐程序和ALS推荐程序.它运行推荐程序的Hadoop/分布式版本。这可以在一台机器上工作,当然,甚至可以使用本地文件系统,因为Hadoop可以通过这种方式设置。
  3. 对于内存中的推荐程序,只需编写驱动程序代码并在eclipse中运行它们,因为Hadoop没有涉及到,所以它工作得很好。如果您想使用Hadoop版本,请在dev机器上安装Hadoop,使用本地文件系统在本地运行,在eclipse中一切正常。一旦进行了调试,将其移动到Hadoop集群中。您也可以在集群上进行远程调试,但这完全是另一个问题。

Mahout推荐程序中的最新内容是使用Hadoop在后台进行培训,然后由Solr对输出进行索引。然后使用用户表示的首选项查询Solr,无需预先计算所有用户的所有recs,因为他们几乎是实时从Solr查询返回的。这是在Mahout1.0-快照的Mahout /示例/或这里的https://github.com/pferrel/solr-recommender

顺便说一句,这段代码正在与Mahout1.0集成,并移到Spark上运行,而不是Hadoop,所以即使是培训步骤也要快得多。

更新:我已经澄清了可以从上面的CLI运行什么。

票数 2
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/23552908

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档