132得票6回答
Dataset.map、Dataset.prefetch和Dataset.shuffle中buffer_size的含义是什么?

根据 TensorFlow documentation,tf.contrib.data.Dataset 类的 prefetch 和 map 方法都有一个名为 buffer_size 的参数。 对于 prefetch 方法,该参数称为 buffer_size,根据文档: buffer_si...

95得票5回答
Dataset.from_tensors和Dataset.from_tensor_slices有什么区别?

我有一个由NumPy矩阵表示的数据集,形状为(num_features, num_examples),我希望将其转换为TensorFlow类型tf.Dataset。 我正在努力尝试理解这两种方法之间的区别:Dataset.from_tensors和Dataset.from_tensor_sl...

72得票11回答
如何将由Tensorflow数据集API创建的数据集分为训练集和测试集?

有人知道如何将Tensorflow中使用数据集API(tf.data.Dataset)创建的数据集拆分为测试集和训练集吗?

66得票19回答
tf.data.Dataset:如何获取数据集大小(一个epoch中元素的数量)?

假设我已经用以下方式定义了一个数据集:filename_dataset = tf.data.Dataset.list_files("{}/*.png".format(dataset)) 我该如何获得数据集中元素的数量(即组成一个时期的单个元素的数量)? 我知道tf.data.Dataset已...

65得票2回答
在Keras中使用tf.data处理多个输入/输出

对于应用程序,例如文本相似度匹配,输入的数据类似于:pair_1,pair_2。在这些问题中,我们通常有多个输入数据。之前,我成功地实现了我的模型:model.fit([pair_1, pair_2], labels, epochs=50) 我决定使用tf.data API替换我的输入管道。 ...

53得票13回答
如何从TensorFlow数据集中提取数据/标签

有很多示例可以演示如何创建和使用TensorFlow数据集,例如:dataset = tf.data.Dataset.from_tensor_slices((images, labels)) 我的问题是如何将TF数据集中的数据/标签以numpy形式取回?换句话说,上面那行代码的反向操作是什么,...

51得票4回答
TensorFlow:训练自己的图像

我是 TensorFlow 的新手。我正在寻求有关图像识别的帮助,希望可以 训练自己的图像 数据集。 有没有训练新数据集的示例?

42得票7回答
TensorFlow:logits和标签必须具有相同的第一维。

我是tensorflow的初学者,我想使用自己的数据(40x40大小的图像)调整MNIST教程https://www.tensorflow.org/tutorials/layers。这是我的模型函数:def cnn_model_fn(features, labels, mode): ...

42得票3回答
将tf.data.Dataset.from_generator并行化

我有一个不平凡的输入管道,from_generator非常适合它...dataset = tf.data.Dataset.from_generator(complex_img_label_generator, (t...

42得票2回答
Tensorflow tf.data自动调节

我在阅读TF性能指南中的数据加载部分。在预取(prefetch)一节中,它说: tf.data API 通过 tf.data.Dataset.prefetch 转换提供了软件流水线机制,可用于将生产数据和消费数据的时间解耦。特别地,该转换使用后台线程和内部缓冲区,在请求元素时提前预取输入数据...