代码之家 › 专栏 › 技术社区 › Matt W.

在配置单元查询中获取不同字段

hiveql hive

Matt W. · 技术社区 · 7 年前

我正在尝试查询一个表并消除查询结果的重复

select distinct(id), distinct(name), distinct(date)
from table
where data_date = '20180722'
and active = True
group by market, country
order by userrole

我要做的是给我一个不同的id、名称、日期等的列表,这是每个分组市场、国家组的第一行,它们首先按userrole排序。有办法这样做吗 hive 是吗?

在里面 R 这将是:

df %>%
    select(id, name, date) %>%
    group_by(market, country) %>%
    arrange(userrole) %>%
    slice(1)

1 回复 | 直到 7 年前

Vamsi Prabhala 7 年前

distinct 在sql和hiveql中,不是函数,而是 关键字 是的。指定 不同的 每个查询一次将提供不同的结果,如 select distinct col1,col2... .

你可以用 row_number 实现此目的的函数。

select id,name,date
from (select t.*,row_number() over(partition by market,country order by userrole) as rnum
      from tbl t
     ) t
where rnum=1

推荐文章

Victor Wong · 如何迭代列A以有条件地对列B求和?

1 年前

StripyTiger · 从配置单元中的列表检索元素

2 年前

mfcss · SQL:使用年/月/日分区查询某个时间段的数据

2 年前

MOMO · 配置单元重命名具有分区的表中的列

2 年前

Minnu · json结构类型加载到配置单元

2 年前

PPSATO · 替代在AWS Athena中使用last_value和first_value

2 年前

te time · 按组获取完整的行集

2 年前

MattRgx · 配置单元中的Regexp将一列拆分为3列

4 年前

mishalhaneef · 如何更新蜂箱颤振数据

4 年前

Bhanuchander Udhayakumar · 为什么spark sql的cpu利用率高于hive?

8 年前