hive 数据清理--数据去重代码,Hive代码库,德仔网

代码语言

代码分类

【Hive】 hive 数据清理--数据去重

作者: / 发布于2018/6/12/ 792

select * from (select *,row_number() over (partition by id) num from t_link) t where t.num=1;


将查询的去重数据保存到新表t_link2中，新表比源表t_link多一列

insert overwrite table t_link2 select * from (select *,row_number() over (partition by id order by crt_time desc) num from t_link) t where t.num=1;

　　

试试其它关键字

同语言下

可能有用的

贡献的其它代码Label

Copyright © 2004 - 2024 dezai.cn. All Rights Reserved 站长博客粤ICP备13059550号-3