Institute of Computing Technology, Chinese Academy IR
| 基于图表征知识蒸馏的图像分类方法 | |
| 杨传广1; 陈路明2; 赵二虎1; 安竹林1; 徐勇军1 | |
| 2024 | |
| 发表期刊 | 电子学报
 |
| ISSN | 0372-2112 |
| 卷号 | 52期号:10页码:3435 |
| 摘要 | 知识蒸馏的核心思想是利用1个作为教师网络的大型模型来指导1个作为学生网络的小型模型,提升学生网络在图像分类任务上的性能.现有知识蒸馏方法通常从单一的输入样本中提取类别概率或特征信息作为知识,并没有对样本间关系进行建模,造成网络的表征学习能力下降.为解决此问题,本文引入图卷积神经网络,将输入样本集视为图结点构建关系图,图中的每个样本都可以聚合其他样本信息,提升样本的表征能力.本文从图结点和图关系2个角度构建图表征知识蒸馏误差,利用元学习引导学生网络自适应学习教师网络更佳的图表征,提升学生网络的图建模能力.相比于基线方法,本文提出的图表征知识蒸馏方法在加拿大高等研究院(Canadian Institute For Advanced Research,CIFAR)发布的100种分类数据集上提升了3.70%的分类准确率,表明本文方法引导学生网络学习到了更具有判别性的特征空间,提升了图像分类能力. |
| 关键词 | knowledge distillation graph convolutional neural network image classification meta-learning representation learning 知识蒸馏 图卷积神经网络 图像分类 元学习 表征学习 |
| 语种 | 英语 |
| 文献类型 | 期刊论文 |
| 条目标识符 | http://119.78.100.204/handle/2XEOYT63/42426 |
| 专题 | 中国科学院计算技术研究所期刊论文_中文 |
| 作者单位 | 1.中国科学院计算技术研究所 2.93114部队 |
| 第一作者单位 | 中国科学院计算技术研究所 |
| 推荐引用方式 GB/T 7714 | 杨传广,陈路明,赵二虎,等. 基于图表征知识蒸馏的图像分类方法[J]. 电子学报,2024,52(10):3435. |
| APA | 杨传广,陈路明,赵二虎,安竹林,&徐勇军.(2024).基于图表征知识蒸馏的图像分类方法.电子学报,52(10),3435. |
| MLA | 杨传广,et al."基于图表征知识蒸馏的图像分类方法".电子学报 52.10(2024):3435. |
| 条目包含的文件 | 条目无相关文件。 | |||||
| 个性服务 |
| 推荐该条目 |
| 保存到收藏夹 |
| 查看访问统计 |
| 导出为Endnote文件 |
| 谷歌学术 |
| 谷歌学术中相似的文章 |
| [杨传广]的文章 |
| [陈路明]的文章 |
| [赵二虎]的文章 |
| 百度学术 |
| 百度学术中相似的文章 |
| [杨传广]的文章 |
| [陈路明]的文章 |
| [赵二虎]的文章 |
| 必应学术 |
| 必应学术中相似的文章 |
| [杨传广]的文章 |
| [陈路明]的文章 |
| [赵二虎]的文章 |
| 相关权益政策 |
| 暂无数据 |
| 收藏/分享 |
除非特别说明，本系统中所有内容都受版权保护，并保留所有权利。
修改评论