我试图将一些日志文件从hdfs推送到s3存储桶
我正在使用distcp命令,但它继续尝试很长时间,请帮我解决它。
sudo -u hdfs hadoop …
在xxxx.xxxx.com/xx.xx.xx.x:8032连接到ResourceManager
看起来您无法从尝试运行distcp作业的主机访问YARN ResourceManager。 “hadoop fs -ls”有效,因为它不涉及YARN。
这可能发生的原因有多种。检查ResourceManager是否确实在节点xxxx.xxxx.com/xx.xx.xx.x:8032上运行,检查是否可以访问该主机/端口。尝试运行一些其他MapReduce作业(例如来自hadoop-examples的Pi)。