onnx文件精度很高转成bin文件零精度

通用
,
1

一个好的问题会收获一个好的答案，提问前请参考提问模板提问：

标题需要包含基本的信息，请以[问题分类][板卡类型][问题简述]的形式填写标题。当一个问题符合多个标签时，也可以提供多个标签。标题举例：[图像算法][RDK X5][xx案例运行现象不符合预期]

[问题分类]参考：[多媒体][图像算法][TROS][语音算法][强化学习][大模型][激光雷达][算法工具链][Linux开发][RDK Studio][RDK Model Zoo][GitHub][… 其他 …]
[板卡类型]参考：[RDK X3][RDK X3 Module][RDK X5][RDK X5 Module][RDK Ultra][RDK S100][… 其他 …]

针对特定的问题，请参考特定领域问题的发帖模板继续提供相关信息: forum.d-robotics.cc/t/topic/28613

1783002723646
17830027236461920×1440 413 KB

2

我来帮你分析这个 ONNX 模型转换精度丢失的问题。先搜索一下社区是否有相关解决方案。

你好！看到你的问题是 ONNX 模型精度很高，但转成 bin 文件后精度归零。这是一个典型的模型量化精度丢失问题，社区已有多个类似案例。

:magnifying_glass_tilted_left: 问题定位步骤

1️ 首先确认问题阶段

请按以下顺序验证，定位精度丢失发生在哪个环节：

# 步骤1: 验证原始 ONNX 模型
python3 test_onnx.py  # 确认 ONNX 推理正常

# 步骤2: 验证量化后的 quantized_model.onnx
python3 test_quantized.py  # 检查量化后 ONNX 是否精度下降

# 步骤3: 验证 bin 模型
./run_bin_model  # 检查 bin 模型推理结果

关键判断：

  • 如果 quantized_model.onnx 精度已经下降 → 问题在量化校准阶段
  • 如果 quantized_model.onnx 正常但 bin 精度归零 → 问题在模型编译阶段

:two: 检查量化配置

查看你的 config.yaml 文件，重点关注：

# 检查量化参数
quantization:
  method: PTQ  # 或 QAT
  calib_dataset: /path/to/calib/data  # 校准数据集是否充足？
  calib_size: 1000  # 建议至少 500-1000 张
  input_type: INT8  # 确认输入类型

:three: 常见原因排查

可能原因 检查方法 解决方案
校准数据不足 检查 calib_size 和数据质量 增加校准数据到 1000+，确保覆盖各种场景
输入预处理不一致 对比 ONNX 和 bin 的输入数据 确保归一化、resize、通道顺序完全一致
量化敏感算子 查看转换日志中的 warning 参考 精度调优文档
模型结构不支持 检查是否有特殊算子 尝试简化模型或使用 QAT 量化

:clipboard: 需要你补充的信息

为了更精准定位问题，请提供：

  1. 板卡型号：RDK X5？
  2. 模型类型：检测/分类/分割？
  3. 转换日志：特别是 hb_mapper 输出的 warning/error
  4. config.yaml：量化配置文件内容
  5. 精度对比数据：
    • ONNX 模型精度：__%
    • quantized_model.onnx 精度：__%
    • bin 模型精度：__%

:link: 相关资源

建议：先按上述步骤定位问题阶段，然后补充详细信息，这样可以更快获得针对性解决方案！

3