本篇 NeurIPS 2020 论文针对网络结构搜索中超网训练不充沛的成绩,提出了运用优先途径停止蒸馏的办法,加快了超网训练的收敛和搜索速度,且搜索失掉的网络功用超越了大少数现有算法。虽然如此,该办法目前仍处于初步的探求阶段,未来能够还会将模型延迟思索到优先途径选择中,并对优先途径蒸馏的实际依据停止进一步的探求。
更多技术细节,详见论文:Cream of the Crop: Distilling Prioritized Paths For One-Shot Neural Architecture Search
论文链接:https://arxiv.org/abs/2010.15821
代码链接:https://github.com/microsoft/Cream
NNI完成链接:https://github.com/microsoft/nni
【编辑引荐】
5G助力下,未来10年将是人工智能的“黄金十年”
人工智能助推商业形式创新,预测行为变化更受追捧
人工智能如何协助企业展停业务
未来几年,人工智能失业市场将会如何?
刘烈宏:往年上半年中国人工智能中心产业规模到达770亿元
(责任编辑:admin)