PROSAGA码农传奇-YARN-如何在HADOOP_CONF

如何在HADOOP_CONF_DIR中指定集群位置？

作者: 甲基蓝
发布时间: 2024-06-09 06:10:16 (1月前)
转自：

<div class =“post-text”itemprop =“text”>
  
     <code>
 HADOOP_CONF_DIR
 </code>
     是包含Hadoop库用于各种Hadoop特定内容的配置文件的目录。我写
    
      各种Hadoop特有的东西
    
     要强调的是，与Spark相关的并不多。
  
  
    更重要的是
     <code>
 HADOOP_CONF_DIR
 </code>
     也可以指向一个空目录（假设默认值）。
  
  
    要回答您的问题，您可以在中定义群集位置
    <a href="https://hadoop.apache.org/docs/r2.7.2/hadoop-yarn/hadoop-yarn-common/yarn-default.xml" rel="nofollow noreferrer">
      纱的site.xml
    </A>
     运用
     <code>
 yarn.resourcemanager.address
 </code>
    。如果
     <code>
 yarn-site.xml
 </code>
     如果找不到，YARN群集可在localhost上获得。
  
  <BLOCKQUOTE>
    
      我应该放在哪里
       <code>
 yarn-site.xml
 </code>
       所以
       <code>
 spark-submit
 </code>
       会用吗？
    
  </BLOCKQUOTE>
  
    我以前用过
     <code>
 YARN_CONF_DIR
 </code>
     指向目录
     <code>
 yarn-site.xml
 </code>
    。
  
   <pre>
 <code>
 YARN_CONF_DIR=/tmp ./bin/spark-shell --master yarn

</code>
 </pre>
</DIV>