您的位置:控制工程论坛网论坛 » 智能制造 » 人机交互机器视觉应用潜力比你想象的要大

yujie0612

yujie0612   |   当前状态:在线

总积分:3617  2024年可用积分:0

注册时间: 2015-01-29

最后登录时间: 2023-08-15

空间 发短消息加为好友

人机交互机器视觉应用潜力比你想象的要大

yujie0612  发表于 2017/3/27 18:40:36      1216 查看 3 回复  [上一主题]  [下一主题]

手机阅读

每个机器人的形态、大小、样貌都不一样,这需要根据具体的应用场景进行分析和设计。但是无论是哪种形态的机器人,基本上都会嵌入视觉系统,用于感知周围的环境,然后通过反馈的信息规划机器人的动作。

香港中文大学天石机器人研究所所长刘云辉教授自本科起就从事机器人研究,至今已经有数十年的研发经验。在 ACT Lab 和深圳湾联合举办的“机器人控制系统和视觉的融合”活动中,刘云辉教授向慕名而来的创业者们分享了自己在机器人领域的所思所得。

我湾梳理了本次演讲的重点和要点,带领读者了解机器视觉领域最前沿的研究课题。

三维视觉技术大有可为

实时三维视觉技术应用广泛,在机器控制、物件抓取和人机交互等技术领域,都不能脱离实时三维视觉技术。正因如此,该技术有着巨大的商业潜力。据报道,预计 2020 年,全球 3D 成像系统市场预计能达到 536 亿人民币,年度复合增长率 39.4%,尤其是在体育医学、矫形外科学、人体测量等医学领域,对 3D 成像技术的需求更为强烈。

刘云辉教授研究实时三维视觉技术多年,他认为:“研究三维视觉技术,归根结底,就是要理解什么是视觉信息,然后将这些视觉信息在实际的场景中应用起来。”他研发的基于结构光的双目视觉技术具有精度高、测量速度快、动态拍摄等特点,并且已经应用在商业化的 3D 成像系统中。

工厂叉车也要自动驾驶

目前,大型工厂的室内物件搬运 70% 靠的是人工驾驶叉车进行操作,但从事重体力劳动工人的人工成本上升和人力资源的短缺,对很多行业造成重大影响,移动机械的自动化改造需求迫切。

经研究发现,室内移动器械自动驾驶的挑战主要有两点:一是无 GPS 的定位和制图,二是精确的运动控制。凭借多年的图像传感器研发经验,刘云辉教授将 Visual SLAM 算法和 RGB-D 传感器集成到移动机器人的视觉导航模块上,应用于移动机械平台,实现了低速且高精度的自动驾驶功能。

刘教授表示,目前为了保证安全性,移动器械的速度并没有做得太快。不过,制造业、建筑业、采矿业、物流业等领域对室内移动器械自动驾驶有强烈的需求,所以,该项技术在未来会有很大的发展空间。

“软”“硬”两手抓

机器人或者机械臂所抓取的物件基本上都是刚体,很少能对变形体进行抓取。不过,在日常生活中,很多物件并不是棱角分明并且内部结构坚硬的刚体,而是以柔性体的形式存在,比如日常所穿的衣服、吃的食物、线材、柔性 PCB 以及人体组织。

刘云辉教授认为,在需要操作形变体的领域中,医疗健康对该技术的需求最强烈并且对操作的精准度也更高。刘教授结合自身的研发经验补充说:“医疗手术机器人的研发主要有三个挑战:首先是安全性,医疗手术中不能容许半点差错,所以如何保证手术机器人的安全性,以及与操作医师的有效配合是重中之重;保证安全性后,机器人如何在柔软的体内进行解剖和组织切除,机械结构如何设计,视觉系统如何设计,就是研究人员面临的第二大挑战;第三,如何让不懂机器人技术的医生快速上手操作,人机交互如何设计,则是第三个挑战。”

为了应对这三大挑战,刘教授针对性地提出了三个解决方案:首先,手术机器人可采用小尺寸的、弹性的、或者柔性的机械结构,在保证操作精度的同时防止人体组织被机械所伤;第二,在机器人内部嵌入多种传感器,比如 IMU、声音传感器、体感设备、眼球跟踪设备等,增强机器人的功能,并简化操作方式;第三,通过在机器人中内嵌摄像头,以图像引导的方式实时获取手术反馈。

人形才是最适的人机交互方式

我们周围的生活环境是以人类的行为方式为基准而建立的,人类可以相当轻松地上楼梯、开门、适应各种地形,所以说最好的机器人形态就是人形机器人。同理,人和人的沟通是我们最习惯的交互方式,所以最好的人机交互就是机器人以“人”的方式进行交互。

人类的语言以及表情能够传递大量的情感信息,所以目前仿人形机器人的研究主要集中在机器人的语言以及表情模拟这两个领域。但是,除了语言和表情,肢体动作也能够传递人的情感信息。

刘云辉教授认为,相对于语言和表情,让机器人模拟人的动作在技术上更容易实现,通过用体感设备让机器人模仿人类的肢体动作,学习人类的行为模式,增强机器人的智能,并最终实现自然的人机交互。

1楼 0 0 回复
  • zhanghe

    zhanghe   |   当前状态:在线

    总积分:3518  2024年可用积分:0

    注册时间: 2010-03-22

    最后登录时间: 2023-08-14

    空间 发短消息加为好友

    zhanghe   发表于 2017/3/28 21:04:37



    楼主大大好人啊 !万分感激啊!

    2楼 回复本楼

    引用 zhanghe 2017/3/28 21:04:37 发表于2楼的内容

  • zhangmengmeng

    zhangmengmeng   |   当前状态:在线

    总积分:1958  2024年可用积分:2

    注册时间: 2013-12-26

    最后登录时间: 2023-08-14

    空间 发短消息加为好友

    zhangmengmeng   发表于 2017/4/2 11:21:41

    好文章

    3楼 回复本楼

    引用 zhangmengmeng 2017/4/2 11:21:41 发表于3楼的内容

  • a1123

    a1123   |   当前状态:在线

    总积分:5620  2024年可用积分:0

    注册时间: 2013-06-20

    最后登录时间: 2023-08-11

    空间 发短消息加为好友

    a1123   发表于 2017/4/2 14:20:10

    谢谢楼主,无私奉献的精神。

    4楼 回复本楼

    引用 a1123 2017/4/2 14:20:10 发表于4楼的内容

总共 , 当前 /