我们可以使用不同的CPU体系结构(和后端)来训练(校准)和推断量化的py手电筒模型吗?
静态量化必须在与部署目标具有相同结构的机器上执行。如果您使用的是x86 CPU,则必须在x86 CPU上执行校准传递;如果使用QNNPACK,则需要在ARM上进行校准。
但在官方文件中没有这方面的内容。
发布于 2021-08-13 16:46:43
您发布的链接中的信息是正确的。您应该在这两种情况下使用相同的后端。在正式文件中也提到了这一点-
在准备量化模型时,必须确保qconfig和用于量化计算的引擎与执行模型的后端匹配。
在这里找到它
https://stackoverflow.com/questions/68272765
复制相似问题