《表1 16位定点数的Q格式表示及精度》
16位定点数的部分Q值以及每个Q值的表示精度如表1。量化单元是该设计中的一大核心模块,量化数据的精度决定了整个卷积运算中的数据精度。对于16位的定点数据,若保留最高精度可使用Q15格式,即将数据放大215倍后用定点数表示,然而,若浮点数的有效数据超出该精度表示范围,即使该数据量化后带来的误差非常小,但将会损失全部有效数据。因此量化适用于有效精度在Q格式可表示最高精度范围内的数据,有效精度超出最高精度表示范围的极少数据将被舍弃。
图表编号 | XD00201563100 严禁用于非法目的 |
---|---|
绘制时间 | 2021.02.15 |
作者 | 唐蕊、焦继业、徐华昊 |
绘制单位 | 西安邮电大学计算机学院、西安邮电大学计算机学院、西安邮电大学计算机学院 |
更多格式 | 高清、无水印(增值服务) |