学术科研

曾锦山教授作深度学习优化理论报告

发布日期:2024-09-12 发表者:陈治国 浏览次数:


   (文|刘力源 编辑|辛西 审核|陈洪) 9月4日上午,信息学院线上举办了“Happy Hour”年度第11期学术交流会。江西师范大学计算机信息工程学院教授、博士生导师曾锦山作了题为“On ADMM in Deep Learning: Convergence and Saturation-Avoidance”的学术报告。信息学院30余名师生参会交流。


   报告中,曾锦山教授首先介绍了深度神经网络的背景知识,分析了梯度消失的挑战。进而,基于Sigmoid函数的逼近特性,曾锦山引入融合该激活函数的深度神经网络,细致分析了对应ADMM 优化设计,阐述优化算法的收敛速率刻画路径,并通过大量实验展示了模型的有效性。最后,曾锦山教授对未来研究方向进行了展望。


   交流环节,师生与曾锦山教授探讨了深度学习理论分析的关键点、潜在的交叉研究领域等。活动负责人介绍,本次学术报告加深了师生对深度神经网络理论和算法的认识,开阔了人工智能算法研究的视野。


   曾锦山教授,博士毕业于西安交通大学,2017年入选江西师范大学首批高端人才计划,2019年入选江西省“双千计划”(首批培养类),主持国家自然科学基金3项、江西省自然科学基金杰出青年基金1项,在JMLR和IEEE汇刊发表论文20余篇。