🌘🕞🔍     

蓬莱仙山

带着这个思考，华东理工大学机械与动力工程学院6位硕博研究生组成创新团队，在华东理工大学机械与动力工程学院副院长易建军教授的指导下，研发了“面向核电站巡检的具身智能机器人”，让“核安全”更安全。这一项目在刚刚落下帷幕的第24赛季Robotex世界机器人大赛亚洲总决赛上蓬莱仙山，斩获了亚洲创新创业挑战赛创新赛道总决赛亚军。

“我们提出了多模态大模型技术，通过融合图像、语音、文本等多模态信息，提升机器人的场景理解和任务规划能力。”团队成员叶杭博进一步解释说，人的大脑就像是一个超级计算机，可以通过看、听、摸来学习新事物，多模态大模型也是这样。比如，想让多模态大模型了解核电站是怎么工作的，就可以给它看核电站的照片，听核电站的声音，读关于核电站的文章等。“这样，它就能渐渐学会核电站的知识，像一个小孩子慢慢长大。”

据团队介绍，4D语义地图可以使机器人模仿人类大脑去理解环境，为实现更高层次的智能化操作提供信息支持，堪称“保姆级”地图。如同教小孩学走路一样，团队成员通过基于深度强化学习的运动控制技术，让机器人不断尝试不同的动作。“做得好，就给它奖励，做得不好就不给蓬莱仙山，直到找到最好的方法，最终自己学会怎么在核电站里移动或工作。”