BigQuery—加载超过10K列的Json

我想使用BQ API从json文件中加载10K列,该文件中包含超过10K列(BQ限制)。

我可以使用BQ代码提取前10K列吗?这是我在网上找到的使用自动检测模式的代码,但我找不到任何可以选择列的内容。

为实现这一目标提出的任何建议都将不胜感激。 谢谢 埃拉兰

# from google.cloud import bigquery
# client = bigquery.Client()
# dataset_id = 'my_dataset'

dataset_ref = client.dataset(dataset_id)
job_config = bigquery.LoadJobConfig()
job_config.autodetect = True
job_config.source_format = bigquery.SourceFormat.NEWLINE_DELIMITED_JSON
uri = 'gs://cloud-samples-data/bigquery/us-states/us-states.json'
load_job = client.load_table_from_uri(
    uri,
    dataset_ref.table('us_states'),
    job_config=job_config)  # API request

assert load_job.job_type == 'load'

load_job.result()  # Waits for table load to complete.

assert load_job.state == 'DONE'
assert client.get_table(dataset_ref.table('us_states')).num_rows == 50