2019年5月六届中国机器人峰会上的机器鱼运动控制项目方法-德赢Vwin官网网

此文是根据北京大学工学院谢广明教授于2019年5月在浙江宁波余姚举行的第六届中国机器人峰会上的《一种基于强化学习与计算流体力学结合的机器鱼运动控制方法》报告录音整理摘编部分而成，

以赛促研，挖掘有特点并结合实际的项目

海洋梦是中国梦的重要组成部分，而建设海洋强国越来越受到重视。谢广明指出了水下机器人的研究方向，他认为，要对单体上的水下智能仿生机器人进行研究，研发各种各样的鱼、海豚等两栖的仿生机器人，通过控制其它方面来提升性能；另一方面，要通过感知通信、关键技术编队协作运输等技术，使一群机器人共同完成任务，变成产业化提供服务。

此外，谢广明还表示要以水中机器人为主体展开各项竞赛活动，通过比赛吸引更多的国内外高校一起促进技术的进步，不光是被动地参与比赛，而是真的主动提出一些有特点、又跟实际发展相结合的项目。据谢广明介绍，他们最初设计比赛项目都偏科研类，逐渐由纯学术的比赛走向跟实际应用结合。并希望通过各种比赛联盟，成为一个竞赛、教学、科研、产业化的平台，将来也会吸引一些企业进入，形成纽带作用，提升水平发展，形成共赢的局面。

仿真训练困难重重

水下机器人发展很难，看上去空间好像很远，但实际上难度很大，它的通信和能源不好定位。谢广明指出，有些项目用大型机器人不好操作，需要开发小型仿生机器人，但这种机器鱼以及控制等方面仍存在很多问题，比如模型难建立、难以做得精巧。因此，用深度强化学习来提高机器人的自主性、智能性或许成为解题思路。但深度强化学习同样存在问题，它的迭代周期非常长，需要长期训练。

仿真训练也得到了大家的关注，但是仿真和实际的距离还是很大，仿真中训练的效果直接用到机器人上，会不会产生成像效果？谢广明认为这之间还是有一定距离。机器鱼有柔性，如何仿真才能够跟实际更接近呢？这也不好弄。如果用流体仿真，比陆地仿真更复杂，代价更大，就面临更多的困难。

强化学习与计算流体力学结合攻破难关

面对这么多难题，应该如何运用呢？谢广明表示，经过一段时间的初步尝试后，他们形成了基于深度强化学习的代理模型，确定程度后，再置于CFD的精细仿真环境中，调整参数，最终取得实际效果。然后将代理模型和精确仿真之间进行切换，形成训练系统。在这个过程中，谢广明及其团队发现用传统控制实现不了让机器鱼走期望的轨道。

于是，他们开始使用预先设定的直线进行vwin 训练，再用曲线进行CFD测试，最后再真实环境中进行测试。目前已实现用DRL方法来控制仿生机器人鱼的运动，并结合实际实验数据和计算流体力学（CFD），提出了自切换模拟系统，实现了从模拟到现实的策略迁移，只有在直线上训练，机器人才能在现实世界中追踪任何不超过其运动能力的曲线。谢广明表示，未来将设计更复杂的任务来形成连续化，进行抗干扰研究、节能研究、多机器人协作研究等多方面的研究，使机器人能完成更复杂的任务。

声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表德赢Vwin官网网立场。文章及其配图仅供工程师学习之用，如有内容侵权或者其他违规问题，请联系本站处理。举报投诉

机器人

机器人

+关注

关注
211

文章
28379

浏览量
206908
CFD

CFD

+关注

关注
1

文章
114

浏览量
18395

原文标题：【峰暴】北京大学教授谢广明：以强化学习征服水世界，打造智能仿生机器鱼

文章出处：【微信号：robotop2025，微信公众号：每日机器人峰汇】欢迎添加关注！文章转载请注明出处。

《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

关键路径：利用GNSS和IMU等传感器直接获取位置信息，同时通过摄像头、激光雷达获取环境距离信息反向推算位置。在数据处理环节，采用卡尔曼滤波器和最大后验估计方法融合多传感器数据，优化机器人位置和运动状态

发表于 12-19 22:26

开源项目！OpenCat—— 一个全能的平价四足机器人

大部分运动能力的替代品。我不是说我能重现那些机器人巨头的精确动作。我只是将价格从数百万美元降低到数百美元。我不期望把它送到战场或其他具有挑战性的环境中。我只是想让这个调皮的伙伴融入一个干净、智能但过于

发表于 12-16 11:44

第六届意法半导体工业峰会2024

▌2024ST工业峰会简介第六届意法半导体工业峰会2024 即将启程！在为期一整天的活动中，您将探索意法半导体核心技术，实现突破性创新，推动可持续发展。参加意法半导体及合作伙伴高管的精彩主题演讲

发表于 10-16 17:18

机器人基本运动

机器人基本运动

发表于 09-19 12:57 •0次下载

开源项目！用ESP32做一个可爱的无用机器人

简介作者在完成硕士论文答辩后，利用空闲时间制作了一个他一直想做的机器人——可爱无用机器人。无用机器人原理是一个连接到开关的电机，通过逻辑门控制。当开关被推到“开”时，

发表于 09-03 09:34

开启全新AI时代智能嵌入式系统快速发展——“第六届国产嵌入式操作系统技术与产业发展论坛”圆满结束

的智能系统中正在发挥关键性的作用，嵌入式操作系统急需升级换代适配智能系统技术与应用架构的新发展。第六届国产嵌入式操作系统技术与产业发展论坛暨嵌入式系统联谊会主题讨论会（总第30次）8月20日在杭州北京

发表于 08-30 17:24

开源项目！用ESP32做一个可爱的无用机器人

发表于 08-30 14:50

人形机器人场景应用联盟正式成立

日前，在“2024首届人形机器人场景应用峰会”上，人形机器人场景应用联盟正式宣告成立。

发表于 08-19 11:17 •693次阅读

第六届国产嵌入式操作系统技术与产业发展论坛议程发布

每年一度的国产嵌入式操作系统论坛即将在杭州滨江举办，今年是第六届了，又是中国嵌入式系统新朋老友相聚的时刻。大模型催生AI走人千家万户、唤醒端侧AI的需求爆发。以机器人、无人驾驶和智能制造为代表的智能

发表于 07-26 10:54

机器人控制系统按控制方法可哪些种类

机器人控制系统是机器人技术的核心组成部分，它负责接收外部指令，对机器人的运动和行为进行控制和调节

发表于 06-16 15:35 •1861次阅读

运动控制和机器人系统有什么区别

在自动化和机器人技术日益发展的今天，运动控制和机器人系统是两个经常被提及的概念。虽然它们都在自动化领域扮演着重要角色，但运动

发表于 06-07 15:09 •544次阅读

基于FPGA EtherCAT的六自由度机器人视觉伺服控制设计

研发的六自由度串联机器人进行实际的运动控制实验。实验证明，机器人可以实时地跟随屏幕上显示的物块运动

发表于 05-29 16:17

基于飞凌嵌入式RK3568J核心板的工业机器人控制器应用方案

器（运动控制）、伺服驱动器、IO模块和电源系统4个部分。 机器人控制系统 机器人控制器是

发表于 05-11 09:40

「喜报」迈步机器人荣获机器人应用典型案例奖

，荣获机器人应用典型案例奖！第八届深圳机器人年度评选于2023年11月启动，先后经由大众投票，《机器人

发表于 02-01 17:10 •1066次阅读

机器人运动学中的非完整约束与运动模型推导

机器人运动学中的运动学约束是指机器人在运动过程中受到的限制，包括位置、姿态、速度和加速度等因素。这些约束会对机器人的自由度产生影响，从而影响

发表于 01-18 16:45 •1842次阅读

搜索历史

2019年5月六届中国机器人峰会上的机器鱼运动控制项目方法

评论

《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

开源项目！OpenCat—— 一个全能的平价四足机器人

第六届意法半导体工业峰会2024

机器人基本运动

开源项目！用ESP32做一个可爱的无用机器人

开启全新AI时代智能嵌入式系统快速发展——“第六届国产嵌入式操作系统技术与产业发展论坛”圆满结束

开源项目！用ESP32做一个可爱的无用机器人

人形机器人场景应用联盟正式成立

第六届国产嵌入式操作系统技术与产业发展论坛议程发布

机器人控制系统按控制方法可哪些种类

运动控制和机器人系统有什么区别

基于FPGA EtherCAT的六自由度机器人视觉伺服控制设计

基于飞凌嵌入式RK3568J核心板的工业机器人控制器应用方案

「喜报」迈步机器人荣获机器人应用典型案例奖

机器人运动学中的非完整约束与运动模型推导