代码之家 › 专栏 › 技术社区 › Martin Studer

从拼花文件读取/写入pyarrow张量

pyarrow tensor parquet numpy

Martin Studer · 技术社区 · 7 年前

在里面 pyarrow ,建议的写作方式是什么 pyarrow.Tensor numpy.ndarray )到拼花锉?甚至不需要通过 pyarrow.Table 和 pandas.DataFrame ?

2 回复 | 直到 7 年前

Wes McKinney 7 年前

拼花地板的数据模型是表格形式的,因此必须在某些地方将张量/矩阵转换为表格形式。我们没有任何内置的便利功能来帮助实现这一点,但可以在问题跟踪器上随意提出特定的功能请求 https://issues.apache.org/jira/projects/ARROW

Uwe L. Korn 7 年前

拼花格式针对具有嵌套数据的表进行了优化,即它希望数据以命名列表示。这与n维列的想法有点不同。对于张量,最好选择不同的格式。

推荐文章

xposure · Tensorflow:训练神经网络时损失没有改善

6 年前

user179156 · 用于向tensorflow模型提供tfrecords字节的java api

6 年前

user25004 · 如何将Pytroch张量从数学上的列向量转换为列矩阵?

6 年前

sashaostr · Keras/Tensorflow中不同时期的训练率如何变化

6 年前

Tom · 如何重塑keras中的张量?

7 年前

Tom · 如何将tensorflow中的dropout应用于多维张量?

7 年前

Sakhri Houssem · 为什么我必须在美国有线电视新闻网(CNN)中将一幅图像重塑为[n,高度,宽度,频道]

7 年前

Jame · 如何打印张量的形状值?

7 年前

baptiste · 动态创建d维张量

7 年前

Brian · Tensorflow-按批次索引对占位符进行分组

7 年前