使用消息队列VS Map / Reduce进行分布式计算

作者: 林老爷的日常
发布时间: 2025-02-06 01:56:06 (6天前)
转自：

2 条回复

0#
回复此人
哇塞 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 当你需要失败，良好的平衡等等时，很难编写自己的“分布式环境”解决方案。如果你需要近乎实时的地图/减少你应该结账 <a href="https://github.com/nathanmarz/storm" rel="nofollow"> 风暴 </A> 这是twitter用于满足其巨大数据需求的方式。它比hadoop更简单，更好地消耗队列类型输入（在我看来）。 </p> <P> 此外，如果您决定分析您在hadoop上的数据，请不要过多担心名称节点的SPOF，有 <a href="http://www.cloudera.com/blog/2012/03/high-availability-for-the-hadoop-distributed-file-system-hdfs/" rel="nofollow"> 从某种角度 </A> 避免它。 </p> </DIV>

编辑

登录后才能参与评论