代码之家 › 专栏 › 技术社区 › noobie2023

雅典娜:如何检查不同行数组中重复元素的数量

amazon-athena hiveql sql

noobie2023 · 技术社区 · 6 年前

我的桌子在雅典娜大街上。一般来说,我不熟悉SQL、HIVE或雅典娜。我有下表

col_id , col_list
ABC    , [abcde, 123gd, 12345, ...]
B3C    , [bbbbb, ergdg, 12345, ...]
YUT    , [uyteh, bbbbb, 12345, ...]

col_id 是唯一的,并且一行数组中的元素也是唯一的。

我需要运行一个查询来计算在不同行的不同数组中重复的元素总数。在上面的示例中,数组元素 12345 显示在第一、第二和第三行,以及 bbbbb 显示在第2行和第3行中,因此重复元素的数量为2。

行的数量不是很大,所以我想性能不是问题。

有谁能告诉我怎么用雅典娜写这个问题吗?谢谢您!

0 回复 | 直到 6 年前

Gordon Linoff 6 年前

可以分解数组并聚合:

select col, count(*)
from t lateral view
     explode(t.col_list) col
group by col
order by count(*) desc;

推荐文章

Johnny T · 基于当前值的SQL合并表[重复]

1 年前

Shukurullox Komiljonov · 从记录中获得相互和解。使用SQL

1 年前

John D · 需要为NULL或NOT NULL的WHERE子句

1 年前

ojek · 如何对SQL结果进行分组和编号?

1 年前

senek · 如何在PL/SQL中将选择结果(列)放入数组中

1 年前

Sax · 规范化Google表格(第一步)

1 年前

BarÄ±Å UÅaklÄ± · 如何在ON冲突更新中使用CTE中的值

1 年前

Jatin · 检索卷计数的动态sql抛出错误语法错误[关闭]

1 年前

Andrus · 如何在sql中查找第二个匹配项

1 年前

Nebula Tech · 在SQL Server中搜索字符串中单词的多次出现

1 年前