如何在配置单元中导出视图数据？

作者: 回忆氵独奏♪
发布时间: 2024-05-13 05:46:01 (2月前)
转自：

3 条回复

0#
回复此人
满目山河 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 1）将结果写入您可以使用的文件中 <code> INSERT OVERWRITE </code> 如下： </p> <pre> <code> insert overwrite local directory '/tmp/output' row format delimited fields terminated by '|' select * from <view>; </code> </pre> <P> 2）如果要将文件写入HDFS，请使用上面的内容 <code> insert overwrite </code> 声明 <code> local </code> </p> <P> 3）视图没有单独的HDFS位置。 </p> <P> 的<strong> 视图 </强> 从表中纯粹是逻辑构造，并且在HDFS中没有为它们创建单独的底层存储。 </p> <P> 的<strong> 查看 </强> 当您想要存储中间结果并直接查询它们而不是一次又一次地在该表上编写复杂查询时，正在使用它们。这就像我们使用的那样 <code> with blocks </code> 在我们的查询中。 </p> </DIV>

编辑
1#
回复此人
一只特立独行的猪 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 您可以使用以下方法将视图数据导出到CSV： </p> <pre> <code> insert overwrite local directory '/user/home/dir' row format delimited fields terminated by ',' select * from view; </code> </pre> <P> 如果需要使用单个文件，请在本地目录中连接文件 <code> cat </code> ： </p> <pre> <code> cat /user/home/dir/* > view.csv </code> </pre> <P> 或者，如果数据集很小，您可以添加 <code> order by </code> 在查询中，这将触发单个reducer并生成单个有序文件。如果数据集很大，这将执行缓慢。 </p> </DIV>

编辑

登录后才能参与评论