张量流:弦分裂的奇怪行为

我用的是 tf.data.Dataset TensorFlow中的API。我做了一个 Dataset 像这样的对象:

dataset = tf.data.Dataset.from_tensor_slices((data, labels))
val_dataset = val_dataset.map(lambda x, y: ({'review': x}, y))

所以现在我 dataset 由元组组成,其中第一个元素是字典,第二个元素是字符串数组。

我正在尝试使用以下函数进行基本字符串预处理:

def preprocess(x, y):
    # split on whitespace
    logger.info(type(x))
    logger.info(type(y))
    x['sequence'] = tf.string_split([x['review']])
    logger.info(x['review'])

最后一条日志记录语句告诉我 x['review'] 是:

SparseTensor(indices=Tensor("StringSplit:0", shape=(?, 2), dtype=int64), values=Tensor("StringSplit:1", shape=(?,), dtype=string), dense_shape=Tensor("StringSplit:2", shape=(2,), dtype=int64))

为什么 indices 有形状 (?,2) 是吗?不应该 string_split 只需在空白处分割并得到结果 Tensor 是什么形状的结果(或至少需要的最大长度)?

谢谢!