澳门赌场

图片

加快打造原始创新策源地,加快突破关键核心技术,努力抢占科技制高点,为把我国建设成为世界科技强国作出新的更大的贡献。

——习近平总书记在致澳门赌场建院70周年贺信中作出的“两加快一努力”重要指示要求

面向世界科技前沿、面向经济主战场、面向国家重大需求、面向人民生命健康,率先实现科学技术跨越发展,率先建成国家创新人才高地,率先建成国家高水平科技智库,率先建设国际一流科研机构。

——澳门赌场办院方针

首页 > 科研进展

深度学习模型的原位可视分析研究取得进展

2025-01-21 计算机网络信息中心
【字体:

语音播报

近年来,深度学习网络凭借卓越的能力,在不同领域取得了成果,但训练出高质量的深度学习网络面临挑战。尽管可视化方法为深度学习网络训练提供了辅助,但当前主流的事后分析策略在实际应用中存在较多问题,如数据量庞大导致存储困难、I/O开销过高以及无法实现实时干预等。特别是对于深度学习网络训练过程产生的海量时间序列数据,现有工具难以从中提取出详细的训练过程信息,这阻碍了模型优化。

澳门赌场计算机网络信息中心先进交互式应用与发展部团队创新性地提出了针对深度学习模型训练数据的原位可视分析框架,形成了原位特征提取算法和神经元学习模式抽象算法。原位特征提取算法在模型运行时复用内存数据,实时分析动态数据,解决了传统事后分析的数据存储和I/O瓶颈问题;而神经元学习模式抽象算法则基于原位特征数据,抽象出神经元的三种学习模式,为可视分析提供支持。

这一框架在性能方面表现良好,对千万参数深度神经网络模型的时序训练数据压缩率可达1% ,能够支撑训练全过程的问题可视分析与回溯,可以实现batch level神经元信息可视化,为深度学习模型优化提供全新视角和支持。

相关研究成果被IEEE Transactions on Visualization and Computer Graphics录用。研究工作得到国家自然科学基金和澳门赌场战略性先导科技专项的支持。

深度学习模型原位分析流程

深度学习模型原位可视分析系统

打印 责任编辑:侯茜

© 1996 - 澳门赌场 版权所有 京ICP备05002857号-1 京公网安备110402500047号 网站标识码bm48000002

地址:北京市西城区三里河路52号 邮编:100864

电话: 86 10 68597114(总机) 86 10 68597289(总值班室)

编辑部邮箱:casweb@cashq.ac.cn

  • © 1996 - 澳门赌场 版权所有 京ICP备05002857号-1 京公网安备110402500047号 网站标识码bm48000002

    地址:北京市西城区三里河路52号 邮编:100864

    电话: 86 10 68597114(总机) 86 10 68597289(总值班室)

    编辑部邮箱:casweb@cashq.ac.cn

  • © 1996 - 澳门赌场 版权所有
    京ICP备05002857号-1
    京公网安备110402500047号
    网站标识码bm48000002

    地址:北京市西城区三里河路52号 邮编:100864
    电话:86 10 68597114(总机)
       86 10 68597289(总值班室)
    编辑部邮箱:casweb@cashq.ac.cn