模型量化(6):Yolov5 QAT量化训练

1. QAT介绍

模型量化(5): 敏感层分析可以看出来,对于yolov5-nano模型,对最后一层detect层进行敏感层分析的时候,发现对检测精度的影响比较大。所以在PTQ/QAT在进行量化时,会跳过这些敏感层。

QAT微调的模型,就是PTQ在校准后的模型。从上一小节可以看出如果PTQ中模型训练和量化是分开的,而QAT则是在模型训练时加入伪量化节点,用于模拟模型量化时引起的误差

1.1 QAT处理流程

    1. 首先在数据集上以FP32精度进行模型训练,得到训练好的baseline模型;
    1. 在baseline模型中插入伪量化节点,
    1. 进行PTQ得到PTQ后的模型;
    1. 进行量化感知训练;
    1. 导出ONNX 模型。

1.2 QAT后精度的提升

文章出处登录后可见!

已经登录?立即刷新

共计人评分,平均

到目前为止还没有投票!成为第一位评论此文章。

(0)
xiaoxingxing的头像xiaoxingxing管理团队
上一篇 2023年9月1日
下一篇 2023年9月1日

相关推荐