带水槽的Unicode字符

作者: 春风助手
发布时间: 2024-08-26 05:16:29 (10小时前)

2 条回复

1#
回复此人
只怕再见是故人 | 2020-08-14 10-17

是的，Flume不支持Unicode字符。您可以使用水槽读取Unicode文件并将数据传输到HDFS。这看起来像是其他问题，将hdfs.fileType更改为DataStream并查看是否可以正确读取输出。 ``` a1.sources = r1 a1.channels = c1 a1.sinks = k1 #source a1.sources.r1.type = exec a1.sources.r1.command = tail -F /root/user/shashi/unicode/french.txt a1.sources.r1.restart = true #sink a1.sinks.k1.type = hdfs a1.sinks.k1.hdfs.path = /flume/events/ a1.sinks.k1.hdfs.filePrefix = events- a1.sinks.k1.hdfs.round = true a1.sinks.k1.hdfs.fileType = DataStream #channel a1.channels.c1.type = memory #connect a1.sources.r1.channels = c1 a1.sinks.k1.channel = c1 ``` 这是我使用的一个smaple配置。

编辑

登录后才能参与评论