使用aws凭据时Distcp重试错误

作者: 無口君
发布时间: 2025-03-18 12:51:04 (8小时前)
转自：

我试图将一些日志文件从hdfs推送到s3存储桶

我正在使用distcp命令，但它继续尝试很长时间，请帮我解决它。

sudo -u hdfs hadoop …

2 条回复

0#
回复此人
無口君 | 2019-08-31 10-32

在xxxx.xxxx.com/xx.xx.xx.x:8032连接到ResourceManager

看起来您无法从尝试运行distcp作业的主机访问YARN ResourceManager。 “hadoop fs -ls”有效，因为它不涉及YARN。

这可能发生的原因有多种。检查ResourceManager是否确实在节点xxxx.xxxx.com/xx.xx.xx.x:8032上运行，检查是否可以访问该主机/端口。尝试运行一些其他MapReduce作业（例如来自hadoop-examples的Pi）。

编辑

登录后才能参与评论