代码之家 › 专栏 › 技术社区 › Woody1193 Nimmi Rashinika

对具有BigQuery中的模型的数据集使用通配符查询

google-bigquery

Woody1193 Nimmi Rashinika · 技术社区 · 3 年前

我有一系列被命名为 {YYYYMM}_{id} 我有一些名为 {groupid}_cost_model .我正在尝试使用以下查询整理所有表中的一些数据:

SELECT * FROM `mydataset.20*`

我遇到的问题是,我有一个名为 200_cost_model 它会导致以下错误:

Wildcard table over non partitioning tables and field based partitioning tables is not yet supported, first normal table myproject:mydataset.200_cost_model, first column table myproject:mydataset.202001_4544248676.

有没有办法从通配符查询中过滤出模型,或者我是被困在将所有表连接在一起?

0 回复 | 直到 3 年前

vitooh 3 年前

使用时 Wildcard tables 您可以使用psuedo列筛选结果:

带有通配符表的查询支持_TABLE_后缀伪列在WHERE子句中。此列包含与通配符,以便查询可以筛选哪些表是访问。例如,以下WHERE子句使用比较运算符来筛选匹配的表

我已经在我这方面进行了测试,尽管只在标准的新创建的表上进行了测试,例如:

SELECT *
FROM
  `mydataset.20*`
WHERE
    _TABLE_SUFFIX like '%cost_model' ;

以及检查所有可能的 _TABLE_SUFFIX 选择它对我来说是这样的:

select  DISTINCT   _TABLE_SUFFIX as suffix from  `mydataset.20*`

但我不确定这是否适用于你的情况。

推荐文章

Hal · 如何在bigquery中从长数据创建列表?

2 年前

Danne Paredes · 如何:对于每个唯一id,对于每个唯一版本,获取最佳分数并将其组织到一个表中

2 年前

Justin · 从字符串中提取日期的大查询

2 年前

Evans Gunawan · 如何使用sql bigquery中的前一列值将数据重塑为新列?

2 年前

Fernando Gomes · 这是本月的第一周。一周从周一开始,周日结束

2 年前

Bill LaLonde · 此错误意味着什么:从位置0开始的行中缺少列索引8所需的列值

2 年前

vinay lokwani · 在大查询中的嵌套字段中插入用于输入数据的语句

2 年前

anat · 在BigQuery中的特定字符串后查找n个字符

2 年前

SaravanaKumar Prithiviraj · 如何在bigquery资源中检测权限删除

2 年前

Anil · 在Google Big\u查询中显示每月的第一天

6 年前