8月12日 沈浩:Application of Geometric Analysis and Optimization in Deep Learning

时间:2019-08-04浏览:306设置


讲座题目:Application of Geometric Analysis and Optimization in Deep Learning

主讲人:沈浩 博士

主持人:金博  教授

开始时间:2019-08-12 10:00:00  结束时间:2019-08-12 11:00:00

讲座地址:理科大楼B1002

主办单位:计算机科学与技术学院

  

报告人简介:

       沈浩,博士,毕业于西安交通大学(本科)及澳大利亚国立大学(博士),现任德国巴伐利亚州立人工智能研究所fortiss 机器学习实验室主任,主要研究方向为几何优化论在信号处理和机器学习中的应用,包括盲信号分离,深度学习及强化学习。沈浩博士先后在澳大利亚国立大学和德国慕尼黑工业大学从事信号处理和机器学习的教学研究15年,在该领域国际权威期刊杂志和世界一流国际学术会议发表专业学术论文近100篇。自200812月始,沈浩博士先后任慕尼黑工业大学数据智能研究所博士后研究员和助理教授(Habilitand)2012-2014任原德国认知技术系统国家精英中心(国家重点实验室)(CoTeSysPI201710月始主持巴伐利亚州立fortiss研究所的机器学习实验室。fortiss研究所为德国巴伐利亚州数字化计划的重要组成部分,为慕尼黑工业大学旗下的一个独立研究所,主要从事汽车自主驾驶,工业4.0,机器人,数据管理,系统工程,可靠性软件,机器学习等领域的技术开发和商业化孵化。


报告内容:

Recent development of Deep Reinforcement   Learning (DRL) has demonstrated superior performance of Neural Networks (NNs)   in solving challenging problems with large or continuous state spaces. One   specific approach is to deploy NNs to approximate value functions by   minimizing the Neural Mean Squared Bellman Error (NMSBE) function. Despite   great successes of DRL, development of efficient numerical algorithms to   minimize the NMSBE is still of great scientific interest and practical   demand. In this work, we analyses the NMSBE function from a smooth   optimization perspective. Critical point analysis of the NMSBE function is   conducted to provide technical insights to develop an efficient Approximate   Newton’s (AN) algorithm. When the existence of global minimum is assumed,   theoretical properties of the AN algorithm being locally quadratically   convergent to a global minimum is confirmed via the ergodic seven-state Baird   star problem. Furthermore, feasibility and capability of the proposed   algorithms are investigated on the continuous state mountain car problem.

  


返回原图
/