具有多模态感知能力的智能软体机械手研究

时间:2025-04-28  作者:Diven  阅读:0

研究背景

具有多模态感知能力的智能软体机械手研究

基于人工智能物联网(AI of things,AIoT),数字孪生(digital twin)在近几年得到飞速发展,是指利用各种传感器的信息将物理系统复制到云端,在云端对系统进行监控和优化,在智能制造领域有重大意义。数字孪生一个重要的应用是无人工厂中的零件分拣和产品组装,由于制作成本低且具有非常高的灵活性,软体机械手受到越来越多的关注。如何使机械手上的传感器提供多维度的信息并且杨氏模量与其相匹配,是提升机械手性能需要考虑的主要问题。

文章概述

电子科技大学集成电路科学与工程学院(示范性微电子学院)“微波电路与微系统集成研究室”张晓升教授团队与新加坡国立大学电子与计算机系“智能传感与微机电系统中心”Chengkuo Lee教授团队合作,开展了“具有多模态感知能力的智能软体机械手”的研究工作并取得重要进展。该成果以“Intelligent Soft RobotIC Fingers with Multi-Modality Perception Ability”为题发表在iScience(26, 107249,2023)期刊上。

该研究以探究TENG在数字孪生场景下的应用为目标,提出了基于TENG的具有两种类型传感器的软体机械手。该系统由9个作为触摸传感器的single-layer TENG(SL-TENG)和3个作为弯曲传感器的comb-shaped TENG(CS-TENG)组成,灵敏度达到110V/kPa,经过20000次按压测试后仍能维持稳定输出。最后结合一维卷积神经网络,该仿生传感系统实现了实时物体识别功能。

这项工作的成果可以概括为以下三个方面:(1)针对触摸传感器,设计了两种结构:金字塔结构和半球结构。经过测试,采用半球结构的SL-TENG灵敏度相较于金字塔结构提升了7%。(2)针对弯曲传感器,特殊设计的固定梳状电极使研究人员可以轻易从CS-TENG产生的信号中分辨出机械手弯曲的角度,分辨率可以达到5°,具有优异的精度和准确度。(3)三个由3D打印机打印的软体手指组成了机械手,可以通过控制输入气体的压力对机械手的抓握力度进行精确控制。(4)引入一维卷积神经网络,使用机械手抓握不同物体时12个传感器(9个SL-TENG和3个CS-TENG)产生的信号生成数据集,训练和测试神经网络,再调用训练后的网络进行物体实时识别,准确率达到98.96%。

061e0822-2a01-11ee-a368-dac502259ad0.png

图1 软体机械手设计研究简介。使用9个SL-TENG作为触摸传感器和3个CS-TENG作为弯曲传感器,最后结合一维卷积神经网络,实现物体实时识别功能。

064e320e-2a01-11ee-a368-dac502259ad0.png

图2 智能传感系统的数据采集和识别响应。(A) 软体机械手的图片。(i) 机械手未充气状态。(ii) 机械手的充气状态。(B) 机械手抓握不同物体时产生的输出响应对应的3D瀑布图。(C) 一维卷积神经网络(1D-CNN)的结构。(D) 学习曲线。(E) 混淆矩阵。

工作小结

本研究开发了一套由基于TENG的软体手指组成的仿生传感系统。提出并测试了SL-TENG的两种新结构。与小尺寸的金字塔微结构相比,具有半球形微结构的SL-TENG的灵敏度提高了7%。并且SL-TENG的输出在20000次按压后仍能保持稳定。提出了几种CS-TENG的结构用于检测机械手的弯曲角度,其中使用固定梳状电极的模型具有最好的性能,该结构具有稳定的信号,可以通过波峰的数量来表示曲率。三根软体手指采用TPU材料进行3D打印,并与其传感器组装成一体作为传感系统,该系统可以通过气压精确控制。传感器生成的数据被发送到计算机并保存为数据集。最后搭建并训练了1D-CNN 模型,并验证了实时物体识别的能力,显示了该系统应用于数字孪生领域的潜力。


审核编辑:刘清

猜您喜欢


通孔型嵌装圆螺母是应用于机械和电子设备中的连接元件,其主要优势体现在以下几个方面。通孔设计使得安装和拆卸更加方便,适用于各种材料和厚度的基材,极大地提升了使用灵...
2015-02-27 00:00:00

PC板配件是构建高性能计算机的关键组成部分,不仅提升了系统的稳定性,还增强了整体的功能性。主板是PC的核心连接部分,负责协调CPU、内存和显卡等组件的工作。显卡...
2008-07-20 00:00:00

现代家庭中,插座是我们日常生活中重要的一部分。公牛插座安全性和实用性而受到广大消费者的喜爱。许多用户反映公牛插座的指示灯电阻经常烧坏,这不仅影响使用体验,还可能...
2025-04-19 07:00:40

贴片电阻上的1002可不是什么神秘代码,其实代表着电阻的尺寸大小。 1002指的是英制尺寸,表示该电阻的长和宽分别为0.01英寸和0.002英寸。 换算成公制单...
2024-11-29 10:25:55

作者:韩党群,唐征兵,张庆玲1 引 言对于一些复杂的电子系统,单块电路板很难实现整个电路的功能,往往需要多块电路板才能实现祭个电路系统的功能,组成一个完整的...
2021-01-14 10:47:00

冷却液管是汽车冷却系统中不可少的一部分,其主要优势体现在以下几个方面。冷却液管能够有效传导冷却液,确保发动机在工作过程中保持适宜的温度,防止过热现象的发生,从而...
2022-03-28 00:00:00


电子元器件的世界中,二极管是最常见且重要的组件。在电路中是关键配件,应用于整流、信号调制等多种功能。其中,通用二极管和开关二极管是两种常见的二极管类型,虽然基本...
2025-03-31 03:00:02

电能计量芯片是现代电力管理系统中不可少的核心组件。通过精确测量电流、电压及功率等参数,实现对电能的高效计量与监控。这些芯片应用于智能电表、家庭能源管理系统及工业...
2022-12-27 00:00:00