tf.map_fn处理RaggedTensor报'无len'错误的原因与解决方案
报错原因
tf.map_fn默认的输出类型推断逻辑不适用于返回RaggedTensor的场景:你的映射函数返回值为RaggedTensor,tf.map_fn无法自动识别该输出类型,会默认按照稠密Tensor的处理逻辑尝试调用len()获取张量长度,RaggedTensor在图模式下不支持该操作,因此触发报错。- 官方示例可正常运行的原因是:示例中
tf.map_fn的输入为RaggedTensor,映射函数作用在RaggedTensor的每一行稠密张量上,输出为普通稠密张量,类型可自动推断,不会触发上述逻辑。 - 额外注意:在
tf.function中使用全局变量的写法不规范,图模式下对全局变量的追踪容易出现不可预期的问题,建议将依赖参数直接传入函数。
解决方案
给tf.map_fn显式指定fn_output_signature参数,声明输出为和X结构一致的RaggedTensor即可解决问题,运算会保持完全并行,输出结果仍为RaggedTensor,符合你的需求。修改后可正常运行的代码如下:
import tensorflow as tf X = tf.ragged.constant([[1.,2.],[3.,4.,5.]], dtype=tf.float32) @tf.function def powerX(i): return X ** i # 显式指定输出签名,X.type_spec完整描述了X的Ragged结构、数据类型等属性 Y = tf.map_fn( powerX, tf.range(3, dtype=tf.float32), fn_output_signature=X.type_spec ) print(Y)
内容的提问来源于stack exchange,提问作者Lars Ericson
相关产品推荐
相关产品推荐

