多年来,西安电子科技大学雷达信号处理国家级重点实验室陈渤教授团队针对智能感知识别、深度学习、概率建模、信息压缩等方向中的挑战问题,开展了认知概率深度网络,序列数据压缩重构等相关研究,并于近日在机器学习与模式识别领域顶级会议以及顶级期刊发表相关工作。
其中,陈渤教授指导的硕士生段志斌和博士生徐逸石合作完成的工作,《TopicNet: Semantic Graph-Guided Topic Discovery》,被第35届 Conference on Neural Information Processing Systems(简称NeurIPS)录用。作为当前全球最负盛名的人工智能学术会议,本届NeurIPS总计收到9122篇有效论文投稿,接收率26%。本篇论文延续了团队在概率深度网络方面的系列工作。众所周知,深度神经网络在各种基于感知的任务(如检测与识别)中甚至已经达到了超越人类的水平,但是其逻辑推理能力却远远落后于人类。其中很重要的一点原因就是神经网络缺乏常识,常识虽然很常见,但它往往难以公式化。因此,如何将常识嵌入神经网络是一项富有挑战性的任务。该论文针对现有概率深度网络缺乏融入先验知识的灵活性问题,探索性地提出将常识(概念之间的包含关系)编码为一种层次结构的先验知识,通过建立概念与网络参数之间的对应关系,可以将常识作为网络学习过程中的有效正则。此外,为了使常识更好地辅助模型,该论文还开发了一种方法从大规模通用知识图谱中提取出有效的常识与任务数据进行适配,并与该团队在ICML2021提出的锯齿形网络结构进行巧妙结合,被应用于概率深度模型中,取得了良好的实验效果。
(a)概率深度模型(b)结构化的常识
词嵌入的分布表示
锯齿形网络结构能够将多层的网络参数投影至同一嵌入空间中,语义相似的参数在嵌入空间中也会距离较近。该论文在此基础上将每个参数都用一个分布来表示,这使得概念之间的包含关系可以被自然地表达,即覆盖范围大的参数(对应于更抽象的概念)可以包含覆盖范围小的参数(对应于更具体的概念),如图展示了模型学习到的单词在嵌入空间中的分布表示。
陈渤教授指导的博士生鲁瑞颖撰写的论文《Dual-view Snapshot Compressive Imaging via Optical Flow Aided Recurrent Neural Network》也被计算机视觉CCFA类期刊International Journal of Computer Vision (IJCV) 录用。该论文延续了团队在快照压缩成像方面的系列工作,旨在从多个视场(FOV)捕获视频并使用2D传感器压缩于单帧快照中,实现多视场压缩感知,享有低带宽、低功耗和低成本的优势,在高速摄影和传输带宽受限的场景下具有巨大的应用潜力。然而,基于迭代优化的传统方法难以在性能和效率上取得平衡,尤其是对于大场景数据重构时间过长且计算量过大,很难应用于现实场景。
双视场视频快照压缩重构框架
该论文针对上述多视场视频快照压缩重构问题,提出一种深度学习方法,能够在数秒内重构出多视野的高质量视频。首先,为了增加不同场景的辨识区别度,该论文基于多视场视频压缩原理提出了一种差异放大机制。随后,构造双分支深度网络从单帧压缩快照中初步重构出不同场景的视频。最后,为了对视频中的动态变化特征进行显式建模,该论文将动态的双向光流信息巧妙地融入递归神经网络,从而完成对双场景视频的精细化重构。该方法在仿真测试数据能够快速完整地重构出双视场的多帧视频,并在真实快照压缩成像系统上验证了其优越性及实用性。该论文构建了针对多视场视频快照压缩成像的高效重构深度网络,促进了实验室对该领域最新技术的研究与发展。
两篇论文的发表是国际学术领域对实验室及学院科研工作的认可,一方面扩大了学校的学术影响力,另一方面也促进了实验室与领域内顶尖学者的交流以及对该领域最新研究进展的了解。今后实验室与学院将继续鼓励师生积极探究前沿科技,提升综合素质。
编辑:胡晋云
忒色 30 2024-04-25
忒色 4月9日上午,在陕西汉中朱鹮国家级自然保护区,陕西今年首只人工孵化朱鹮顺利破壳 2024-04-25
忒色 如今,西安还有不少像万邦古旧书房一样的古旧书店,它们开辟出了一个平静独处的角落,为喜欢古旧书的读者留下一方精神家园 2024-04-23
忒色 1991年,韩城市历史文化名城保护委员会成立,出台《韩城市历史文化名城保护规划实施管理办法》,强化对古城的保护 2024-04-22
忒色 图为4月14日航拍宁陕县秦岭乡村绿道一角 2024-04-18
忒色 穿着华服的“花神”翩翩起舞 4月14日下午,12位身着华服的“花神”现身大唐芙蓉园并巡游,这也意味着曲江文旅2024长安踏春季活动正式启动 2024-04-16
忒色 一位“00后”“陪拍师”小张告诉记者,最近公园里不少来拍照的人手里拿着反光板、相机,甚至还带了小板凳、折叠梯——这其中很多都是“陪拍师” 2024-04-16
忒色 演员市场成熟、拍摄场景丰富、制作公司水平在全国都称得上数一数二,西安发展微短剧产业十分有优势 2024-04-16
忒色 赛事期间,杨凌示范区酒店延迟至15时退房,新增7辆“杨马”专列,赛前赛后安排摆渡车,为参赛选手提供免费营养早餐……今年的杨凌农科城马拉松赛上,还有4120名青年志愿者活跃在赛场各处,提供赛道补给、线路引导、物品发放、医疗救助等服务 2024-04-15
忒色 两只彩鹮现身西安浐灞国家湿地公园 西安浐灞国家湿地公园供图 本报讯 (首席记者 龚伟芳) “彩鹮的小伙伴也来啦!”近日,西安浐灞国家湿地公园又传来好消息,在清明节假期刚刚现身的国家一级重点野生保护动物彩鹮,引来了另一只彩鹮小伙伴,让人大呼惊喜 2024-04-11