边缘数据治理-从边缘节点推送kafka消息的最佳方法是什么？-行业智能，新时代，新科技，新码农

清月 | 2021-01-25 00:40:10 |转自：

2 条回复

1#
回复此人
⑩Ⅵ嵗Ｄ夨憶 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> 据我所知，以下是您的选择： 在每个区域中设置本地Kafka群集并拥有边缘节点 写入本地Kafka集群以进行低延迟写入。从 在那里，您将设置一个镜像制造商，将数据从您当地的Kafka提取到您的远程Kafka进行聚合。 如果您担心使用高潜在阻塞请求中断应用程序请求路径，那么您可能希望将生产者配置为异步（非阻塞）写入远程Kafka群集。根据您的编程语言选择，这可能是简单或复杂的练习。 运行每个主机中继（或数据缓冲区）服务，该服务可以像推送到远程Kafka集群的日志文件和守护程序一样简单（如上所述）。或者，运行单个实例Kafka / Zookeeper容器（有两个捆绑在一起的docker镜像），缓冲数据以进行下游拉取。 </醇> 选项1.绝对是解决这个问题的最标准的解决方案，尽管有点重。我怀疑Confluent / Kafka将会有更多的工具来支持将来的选项3。

登录后才能参与评论