2022年7月19日，应浙江大学机械工程学院邀请，英国卡迪夫大学副教授Ze Ji为我院师生举行了一场线上学术报告会，主题为“Robot Learning for Manipulation and Navigation”。报告会由我院彭涛副教授主持，来自浙江大学、香港理工大学、西安电子科技大学、武汉理工大学、东华大学的120余名师生线上参加。

Dr. Ze Ji现为英国卡迪夫大学工程学院机器人与自主系统的副教授，人工智能、机器人与人力资源管理(IROHMS)中心的共同负责人，曾在学术界和工业界（戴森、联想和自主水面车辆）担任多个职位，主持完成了由EU FP6/FP7/H2020、Innovate UK、英国皇家学会等学术机构，以及Renishaw、Spirent、Continental等工业界资助的多个项目。Dr. Ze Ji在机器人领域拥有丰富的研发经验，包括室内移动机器人、工业机器人操作手和自主水面车辆。研究成果主要集中在机器人视觉、强化学习、机器学习、同时定位和映射（SLAM）、触觉感知及其在机器人自主导航、操作和智能制造中的应用。

本次报告会，Dr. Ze Ji分享了他在机器人操作、导航等方面的强化学习方面的一些工作。报告会伊始，Dr. Ze Ji向大家展示了近些年团队的研究工作，包括无人水面艇、无人机、蛇形机器人等，介绍了机器人自主操作的强化学习，包括强化学习（RL）、分层强化学习（HRL）、目标条件强化学习（GRL）的基本概念。接着，Dr. Ze Ji重点介绍了在无地图导航的强化学习方面的研究内容，讨论了传统DQN算法的局限性，并提出了一种基于深度确定性策略梯度（DDPG）的感知导航方法，该方法利用演示数据与模拟数据训练政策，采用优先级经验回放算法，更频繁地抽样优先数据，用于更健壮的本地化和路径跟踪。

本次学术报告会是浙江大学机械工程学院M.E Global云端系列讲座第四期（“制造数字化与数据智能”国际科研工作坊项目）的第五讲，本专题由彭涛副教授策划组织，邀请多所高校学者讲述前沿学术研究进展，旨在开拓学生国际化视野，拓宽学生科研思路，培育具有国际竞争力的高水平人才。