代码之家 › 专栏 › 技术社区 › eilalan

如何在数据流工作器上强制安装google cloud bigquery==0.28.0

google-cloud-dataflow google-bigquery

eilalan · 技术社区 · 6 年前

我很难让bigquery的最新版本用于数据流工作者。有人能告诉我什么是使这项工作更容易的方法吗? 使用google cloud bigquery==0.28.0设置setup.py将使工作流在Workers启动时的安装失败。

从这个链接可以看到: https://cloud.google.com/bigquery/docs/python-client-migration googlecloudbigquery0.25.0是目前dataflow支持的最新版本,非常麻烦,效率不高。如果你有什么建议,请告诉我。

非常感谢, 埃拉兰

1 回复 | 直到 6 年前

Felipe Hoffa 6 年前

不幸的是,目前这是不可能的。应通过梁2.7.0进行固定。

同时-继续使用googlecloudbigquery0.25.0-beam 2.7.0应该会在几周内发布。

推荐文章

Prof. Falken · 在CSV中读取时,Tensorflow错误“UnimplementedError:不支持将字符串转换为浮点”

6 年前

Philipp · 使用python的apache beam中PCollection内几个字段的最大值和最小值

6 年前

Paolo Ciarrocchi · 使用GCP模板将云存储文本转换为BigQuery

6 年前

Jaison · 是否可以使用Apache beam处理非结构化数据(多行web日志)?

6 年前

smanurung · 使用ValueProvider读取多个Pubsub订阅

6 年前

Josh Sacks · 控制数据流/Apache Beam输出分片

6 年前

Henry Chen · 使用数据流从计算引擎读取数据

6 年前

bw4sz · 除了google云数据流之外,apache beam python还支持哪些跑步者?

6 年前

Jermell Beane · 使用标签选项时,模板无法在GoogleCloudDataflow上解析

6 年前

ShubhamR · 如何将Pcollection<String>变量转换为字符串

6 年前