在 hive 表的顶部添加一些行

Question

我在 hive（之前）中有一个这种形式的表：

AB_dimp|SF_0060H00000nhSrmQAE|EBA Order 1127735|Execute|New From
AB_dimp|SF_0060H00000nhSwkQAE|EBA Order 1127725|Execute|New From
AB_Dimp|SF_0060H00000nhSyDQAU|EBA Order 1127728|Execute|New From

我想将这 3 行以这种形式（之后）显示在 hive 中该表的顶部：

[Yellow]
Cat ID|AN_Net|
[network]
AB_dimp|SF_0060H00000nhSkPQAU|EBA Order 1127708|Execute|New From
AB_DIMP|SF_0060H00000nhSl8QAE|EBA Order 1127709|Execute|New From
AB_DIMP|SF_0060H00000nhSrmQAE|EBA Order 1127735|Execute|New From

请问如何在 Hive 中实现这一点？

Answer 1

a.) 首先，创建另一个表（假设是 NewTable）并插入这 3 条记录

b.) 现在，将现有数据插入到另一个表中

insert overwrite table NewTable select * from ExisitngTable;

c.) 删除 ExisitngTable

d.) 现在将数据从 NewTable 插入 ExisitngTable

insert overwrite table ExisitngTable select * from NewTable name;

Answer 2

全部使用联合：

select '[Yellow]' as col_name union all
select 'ID|AN_Net|'           union all
select '[network]'            union all
select col_name from your_table;

如果你想在表中添加这些行，不仅选择它们，你不需要中间表来实现：

insert overwrite your_table 
select * from 
(
    select '[Yellow]' as col_name union all
    select 'ID|AN_Net|'           union all
    select '[network]'            union all
    select col_name from your_table
)s;

但请记住，表中的行没有排序。当您选择没有order by 的表时，会在许多映射器上并行执行选择。底层文件被拆分，映射器读取每个自己的拆分。它们并行执行，彼此完全隔离，并且也独立返回结果。哪个更快它的结果将返回更快，你看，只有 order by 保证返回的行的顺序。这意味着下次当您以一定的概率选择此表时，您可能会返回这些额外的行而不是第一行。只有 ORDER BY 可以保证行的顺序。并且您需要有一些列可用于对行进行排序，例如 id，或者您的列可以按顺序使用。 如果表很小，则有可能在单个映射器上读取它，并且行将按原始顺序返回，就像在基础文件中一样。

要保留文件中的行顺序，您可以添加 row_order 列并在 ORDER BY 的上层查询中使用它：

select  DRM_Pln_Parent, opportunityid, opportunity_name
   from
   (
   SELECT 1 as row_order, '[hier]' as DRM_Pln_Parent, '' as opportunityid, '' as opportunity_name
UNION ALL
   SELECT 2 as row_order, 'Opportunity ID|SF_AllOpportunities|' as DRM_Pln_Parent, '' as opportunityid, '' as opportunity_name
UNION ALL
   SELECT 3 as row_order, '[relation]' as DRM_Pln_Parent, '' as opportunityid, '' as opportunity_name
UNION ALL 
   SELECT DISTINCT 4 as row_order, 'SF_AllOpportunities' AS DRM_Pln_Parent, 
CONCAT('SF_',opportunityid) as opportunityid, 
opportunity_name, 
from ...

   )s
order by row_order  

为了更好地理解，另请参阅此答案：https://stackoverflow.com/a/43368113/2700344