霍夫曼编码可用于无损数据压缩。思想就是给出现概率较大的符号设定较短的二进制码,给出现概率较小的符号设定较长的二进制码。从而达到压缩总二进制编码长...

收录了3篇文章 · 4人关注
霍夫曼编码可用于无损数据压缩。思想就是给出现概率较大的符号设定较短的二进制码,给出现概率较小的符号设定较长的二进制码。从而达到压缩总二进制编码长...
大致有四类方法:1.参数裁剪和共享。2.低阶因式分解。3.迁移卷积核。4.知识蒸馏。 1.参数裁剪和共享 步骤一般为:连接裁剪->参数聚类量化-...
前言 目前提高机器学习算法性能的方法几乎都用多模型ensamble,在计算上非常昂贵且难以部署,尤其是大型神经网络,比如bert。知识蒸馏就是希...
专题公告
记录模型压缩加速的学习。