代码之家 › 专栏 › 技术社区 › Sodved

google bigquery中的rownum或rowid

google-bigquery

Sodved · 技术社区 · 6 年前

把一些东西移植到bigquery,然后遇到一个问题。我们有一堆没有唯一键值的数据。不幸的是,有些报表逻辑要求每一行有一个唯一的值。

所以在像Oracle这样的系统中,我只需要使用 ROWNUM 或 ROWID psudeo柱。

在Vertica,它没有那些我会用到的psudeo列 ROW_NUMBER() OVER() 是的。但在因错误而失败的bigquery中:

'dataset:bqjob_r79e7b4147102bdd7_0000016482b3957c_1': Resources exceeded during query execution: The query could not be executed in the allotted memory.
OVER() operator used too much memory..

该值不必是持久的,只是查询结果中的一个唯一值。

希望尽可能避免提取过程重新加载。

那么,有没有办法在bigquery sql中为查询结果行分配unqiue值呢?

编辑:对不起,本该澄清的。使用标准SQL,而不是传统SQL

1 回复 | 直到 6 年前

Felipe Hoffa 6 年前

为了 ROW_NUMBER() OVER() 要缩放,您需要使用 PARTITION .

见 https://stackoverflow.com/a/16534965/132438

#standardSQL
SELECT *
  , FORMAT('%i-%i-%i', year, month, ROW_NUMBER() OVER(PARTITION BY year, month)) id
FROM `publicdata.samples.natality`

推荐文章

Hal · 如何在bigquery中从长数据创建列表?

2 年前

Danne Paredes · 如何:对于每个唯一id,对于每个唯一版本,获取最佳分数并将其组织到一个表中

2 年前

Justin · 从字符串中提取日期的大查询

2 年前

Evans Gunawan · 如何使用sql bigquery中的前一列值将数据重塑为新列?

2 年前

Fernando Gomes · 这是本月的第一周。一周从周一开始,周日结束

2 年前

Bill LaLonde · 此错误意味着什么:从位置0开始的行中缺少列索引8所需的列值

2 年前

vinay lokwani · 在大查询中的嵌套字段中插入用于输入数据的语句

2 年前

anat · 在BigQuery中的特定字符串后查找n个字符

2 年前

SaravanaKumar Prithiviraj · 如何在bigquery资源中检测权限删除

2 年前

Anil · 在Google Big\u查询中显示每月的第一天

6 年前