代码之家 › 专栏 › 技术社区 › Andre

Pythorch:在一个文件中包装多个记录?

tfrecord record pytorch image

Andre · 技术社区 · 5 年前

有没有一种标准的方法可以将多个记录(在本例中是来自多个.png或.jpeg图像的数据)编码到一个PyTorch可以读取的文件中吗?类似于TensorFlow的“TFRecord”或MXNet的“RecordIO”,但对于PyTorch。

我需要从S3下载图像数据以进行推断,如果图像数据包含在许多小的.jpg文件中,而不是较少的文件中,则速度会慢得多。

谢谢。

0 回复 | 直到 5 年前

scarecrow 5 年前

一件事是将成批的图像存储在一个单一的 npz 文件。努比的 np.savez torch.from_numpy 转换为张量。

推荐文章

Ze0ruso · 做模型。eval()在代码中的位置有什么关系?

2 年前

rkraaijveld · sklearn的Coef。线性回归为无

2 年前

Ellis Thompson · 填充一个numpym数组以满足所需的大小

2 年前

Adam · 如何在多个模型上并行运行PyTorch推理?

2 年前

quinlan · 是dgl。nn。皮托克。GraphConv聚合边缘信息?

2 年前

Ofek Nourian · 完全连通的简单自回归模型预测

2 年前

MrThiele1708 · 运行时错误:mat1和mat2形状不能相乘(5400x64和5400x64)

2 年前

Moodhi · 计算GEC的F分数

2 年前

john wang · matlab使用可调用的python函数,但需要输入

2 年前

odbhut.shei.chhele · 如何解决错误:RuntimeError:收到0项ancdata

2 年前