滦南新媒体是领先的新闻资讯平台,汇集美食文化、教育科研、商旅生涯、体育健康、综艺娱乐、国际资讯、等多方面权威信息
2022-10-31 08:06:57
【网易科技9月5日报道】据悉,为了推动低比特量化技术的发展,旷视天元MegEngine团队开源了INT4的源码实现,这也让MegEngine成为首个开源CUDAINT4源码实现的深度学习框架。据介绍,MegEngine采用均匀线性量化方案,实现了非对称量化和对称量化两种INT4的数据类型,同时通过算子融合优化、kernel优化等方法,使得量化后的模型可以依然保持较高的精度以及良好的运行速度。自开源以来,MegEngine不断优化,已先后发布29个版本。(定西)