hivedistict和count操作reducer只有一个的问题

select count(distinct *) from table;

利州ssl适用于网站、小程序/APP、API接口等需要进行数据传输应用场景,ssl证书未来市场广阔!成为创新互联的ssl证书销售渠道,可以享受市场价格4-6折优惠!如果有意向欢迎电话联系或者加微信:13518219792(备注:SSL证书合作)期待与您的合作!

这样写会生成一个job 只有一个reducer执行,可以改为如下:

select count(*) from (

select distinct * from table) t;

这样生成两个job,可有多个reducer执行,效率提升


分享文章:hivedistict和count操作reducer只有一个的问题
文章源于:http://csruizhi.cn/article/gpjjjs.html

其他资讯

Copyright © 2007-2024 成都优众联杰科技有限公司 All Rights Reserved 蜀ICP备2024116266号
友情链接: 成都网站设计制作公司 重庆外贸网站建设 四川成都网站制作 网站制作公司 高端网站设计 网站建设费用 成都网站建设 上市集团网站建设 攀枝花网站设计 企业网站建设公司 品牌网站建设 成都网站建设 成都品牌网站建设 手机网站制作设计 成都网站建设 重庆企业网站建设 温江网站设计 成都网站设计 网站建设推广 成都网站建设 成都企业网站建设 手机网站制作