代码之家 › 专栏 › 技术社区 › Paolo Ciarrocchi

使用GCP模板将云存储文本转换为BigQuery

google-cloud-dataflow google-cloud-platform

Paolo Ciarrocchi · 技术社区 · 6 年前

但我得到了一个错误:

2018-03-30 (15:35:17) java.lang.IllegalArgumentException: Failed to match any files with the pattern: gs://.......

任何人都可以共享一个可用的CSV文件作为运行该管道的输入吗?

2 回复 | 直到 6 年前

Paolo Ciarrocchi 6 年前

问题出在椅子和键盘之间,您只需要根据JSON文件中定义并由JS文件转换的数据结构创建一个CSV文件。

Community CDub 4 年前

我看到这个问题已经得到了回答,但我遇到了一个类似的问题,这个答案对我来说是片面的——事实证明,模板中的路径模式(至少目前)不支持某些类型的模式。例如,对于给定GCS路径中跨多个子目录的多个CSV文件(这是我的用例):

gs://bucket name/dir/

有效的模式是:

gs://bucket name/dir/*/*。csv

这些模式虽然通过gsutil ls有效并返回正确的文件,但在模板中不起作用:

gs://bucket name/dir/*

gs://bucket name/dir/*。csv

推荐文章

Saravana Kumar · 是否将值插入结构列?

1 年前

Supplementing · 使用nuxt在谷歌应用程序引擎上部署失败

1 年前

mehere · 谷歌搜索控制台-批量导出-缺少权限

1 年前

Chris A · 生成中未拾取环境变量

2 年前

zinger44 · 如何将数据集从Huggingface移动到谷歌云?

2 年前

Mazen Ezzeddine · 使用一点上下文搜索谷歌云日志(匹配关键字的日志和匹配日志前后的少量日志。)

2 年前

nav112 · 在GCP中将桶数据从区域移动到多区域

2 年前

so beautiful memory · 如何将我在本地训练的tensorflow模型正确部署到谷歌云人工智能平台?我部署了它,但没有图像返回

2 年前

Theo75 · R库将消息发布到Google Cloud Pub/Sub主题

2 年前

Itamar Cohen · 谷歌管理的SSL证书不起作用

2 年前