tensorrt, dynamic shape
1. 问题
trtexec对onnx动态H,W的模型转换时的报错。
Resize_53 [Resize] inputs: [715 -> (-1, 128, -1, -1)], [454 -> ()], [455 -> ()], [453 -> (4)],
[09/10/2021-10:49:20] [V] [TRT] ImporterContext.hpp:154: Registering layer: Resize_53 for ONNX node: Resize_53
[09/10/2021-10:49:20] [V] [TRT] ImporterContext.hpp:120: Registering tensor: 456 for ONNX tensor: 456
[09/10/2021-10:49:20] [V] [TRT] ModelImporter.cpp:179: Resize_53 [Resize] outputs: [456 -> (-1, -1, -1, -1)],
Add_54 [Add] inputs: [440 -> (-1, 128, -1, -1)], [456 -> (-1, -1, -1, -1)],
[09/10/2021-10:49:20] [V] [TRT] ImporterContext.hpp:154: Registering layer: Add_54 for ONNX node: Add_54
[09/10/2021-10:49:20] [V] [TRT] ImporterContext.hpp:120: Registering tensor: 457 for ONNX tensor: 457
[09/10/2021-10:49:20] [V] [TRT] ModelImporter.cpp:179: Add_54 [Add] outputs: [457 -> (-1, 128, -1, -1)],
模型的可视化截图

问题: add操作的输入为[440 -> (-1, 128, -1, -1)], [456 -> (-1, -1, -1, -1)],第二维度没有对应。
解决方案
暂无。。
在尝试使用trtexec工具将ONNX模型转换为TensorRT时,遇到动态形状问题,具体表现为Resize操作的输入尺寸不匹配。模型的Resize层输入维度为(-1,128,-1,-1),而后续Add操作的输入之一维度为(-1,-1,-1,-1),导致第二维度无法对应。目前尚无解决方案。

9844

被折叠的 条评论
为什么被折叠?



