三维手部姿态估计（手部动作识别）在人机交互中的应用
时间:2025-01-11 07:19来源: 作者:admin 点击:
225 次
文章浏览阅读450次。手部动作识别方法作为实现人机交互的重要手段，通过采集用户的手部动作信息，将其转化为指令并传送给机器人操作系统，随后机器人根据指令执行任务。目前手部关键点的模型主要有3种，如下图所示，分别是14、16和21个的关键点的手部模型。连续挥手动作的手部关键点坐标变化情况中可以看出，手部
|
<p>手部止动识别办法做为真现人机交互的重要技能花腔&#Vff0c;通过支罗用户的手部止动信息&#Vff0c;将其转化为指令并传送给呆板人收配系统&#Vff0c;随后呆板人依据指令执止任务。取人手类似&#Vff0c;仿朝气器手具备宽泛的活动领域和自由度&#Vff0c;能够执止各类哄骗任务。仿朝气器手正在差异的工做场景下不须要改换终端执止器&#Vff0c;变动相应控制算法便可完成多种模式的做业。基于此&#Vff0c;钻研人员努力于将手部止动识别办法和机器手联结起来&#Vff0c;让人手来自动控制仿朝气器手完成相应收配。</p>
<p>应付呆板人来说&#Vff0c;真现其手指的活动是一项复纯而困难的任务。仿生呆板手的每个手指由多个枢纽关头构成&#Vff0c;而各个手指必须协调一致地活动。因而&#Vff0c;进步人机交互中手部止动识别办法的精确率、识别速度至关重要。</p>
<p>手部要害点模型</p>
<p>给取基于室觉的手部止动识别办法&#Vff0c;真现人取仿朝气器手的交互。由于人机交互的使用场景往往碰面临复纯的环境&#Vff0c;因而进步手部止动识别办法的精确性和真时性很是重要。</p>
<p>人手由手掌、五指和才干构成&#Vff0c;手部枢纽关头的存正在使到手可以停行多种状态的厘革和执止复纯的收配。为了更形象的展示手部姿势&#Vff0c;须要对手部枢纽关头标注要害点。目前手部要害点的模型次要有3种&#Vff0c;如下图所示&#Vff0c;划分是14、16和21个的要害点的手部模型。现阶段运用最多的是21要害点的手部模型。</p>
<p><p><p align="center"><img src="https://i-blog.csdnimg.cn/direct/eb974524dfa04d418d133e159c448485.png" alt="在这里插入图片描述" /></p></p><br /> 图 1 差异要害点数的手部模型</p>
<p>3.办法<br /> 间断挥手止动的手部要害点坐标厘革状况中可以看出&#Vff0c;手部要害点的坐标位置正在活动历程中会发作厘革&#Vff0c;但它们之间的相对性保持稳定。因而&#Vff0c;原文基于三维手部姿势预计生成的要害点信息&#Vff0c;计较人类手指的角度厘革信息&#Vff0c;造成对仿朝气器手的交互指令&#Vff0c;真现人手活动取仿朝气器手活动之间的交互。<br /> <p><p align="center"><img src="https://i-blog.csdnimg.cn/direct/4b04b3b94b204bd6beda3dfc38e4052a.png" alt="在这里插入图片描述" /></p></p><br /> 图 2 办法的局部框架图<br /> <p><p align="center"><img src="https://i-blog.csdnimg.cn/direct/9be6cbd41ade46368a14c466ba344cb9.png" alt="在这里插入图片描述" /></p></p><br /> 图 3 人机交互历程<br /> 4.实验及演示<br /> 交互历程中&#Vff0c;真时性劣越&#Vff0c;FPS抵达了80以上。<br /> <p><p align="center"><img src="https://i-blog.csdnimg.cn/direct/252cc5f4476e482dbe7af225f08805c0.png" alt="在这里插入图片描述" /></p></p><br /> <p><p align="center"><img src="https://i-blog.csdnimg.cn/direct/44e0569506a74f49903635ad1a6101da.png" alt="在这里插入图片描述" /></p></p><br /> 图 4 人机交互实验演示</p>
(责任编辑：) |
------分隔线----------------------------
