Dataproc上的Apache Mahout？

作者: 筱梨
发布时间: 2024-03-22 10:15:06 (1月前)
转自：

3 条回复

0#
回复此人
老人与海。 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 我认为Mahout不受支持。 </p> </DIV>

编辑
1#
回复此人
咿呀哟 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 默认情况下，Google Cloud Dataproc不捆绑Apache Mahout，但它可以通过几种不同的方式与Dataproc一起使用。 </p> <H3> 捆绑在一个超级罐子里 </H3> <P> 您可以将它捆绑到jar中（使用Maven阴影或程序集插件或您选择的构建工具中的等效插件），并将其作为常规Hadoop MapReduce或Spark作业运行。 </p> <H3> 作为主节点上的客户端 </H3> <P> Mahout 0.11.0可用作Dataproc内的Apache Bigtop软件包。如果您运行： </p> <pre> <code> sudo apt-get update sudo apt-get install mahout -y </code> </pre> <P> 在主节点上，无论是在SSHing之后还是在初始化操作中，都应该使用具有适当类路径的'mahout'命令。 </p> <H3> 有关Spark版本控制的重要说明 </H3> <P> Mahout 0.11.0仅支持Spark 1.3，但Dataproc（1.0）附带Spark 1.6.1。您可以下载或捆绑Mahout 0.12.0。上周发布，但即使只是声称支持Spark 1.5。当有更好的Spark兼容性解决方案时，我们将在。创建一个Mahout初始化操作 <a href="https://github.com/GoogleCloudPlatform/dataproc-initialization-actions" rel="nofollow"> https://github.com/GoogleCloudPlatform/dataproc-initialization-actions </A> 。 </p> </DIV>

编辑

登录后才能参与评论