王赋攀¹，吴亚东^1,2，杨文超³，杨帆⁴，侯佳鑫¹，廖竞¹

¹(西南科技大学计算机科学与技术学院 四川绵阳 621010);²(西南科技大学四川省军民融合研究院 四川绵阳 621010);³(达闼科技成都有限公司 成都 610100);⁴(法国国家科学研究中心电子、计算与成像科学实验室(勃艮第大学) 法国第戎 21078) (wfp_2001@126.com)

出版日期: 2018-12-01


基金资助:国家自然科学基金项目(61872304，61802320，61872066, 61502083);四川省科技基础条件平台项目(2017TJPT0020);四川省科技计划项目(2017KZ0023)；四川省军民融合研究院开放基金项目(JMRH01)

Design and Research of Data Glove Based on Visual Information Fusion

Wang Fupan¹, Wu Yadong^1,2, Yang Wenchao³, Yang Fan⁴, Hou Jiaxin¹, Liao Jing¹

¹(School of Computer Science and Technology, Southwest University of Science and Technology, Mianyang, Sichuan 621010);²(Sichuan Civil-military Integration Institute, Southwest University of Science and Technology, Mianyang, Sichuan 621010);³(CloudMinds Chengdu Co., Ltd, Chengdu 610100);⁴(Laboratory of Electronic, Computing and Imaging Sciences, French National Centre for Scientific Research (LE2I-UMR CNRS 6306) (University of Burgundy), Dijon, France 21078)

Online: 2018-12-01

摘要/Abstract

摘要： 基于数据手套的手势交互是人机交互技术的重要实现方式，手势识别和空间定位效率对虚拟交互任务中的沉浸感和体验感有重要影响.目前主要的数据手套产品的复杂结构导致相应建模及手势识别算法设计复杂度高，难以兼顾成本和效率.面向应用需求，完成了一种融合视觉信息的数据手套应用系统方案设计.首先，在手势识别上，通过将3指弯曲度数据和视觉采集模型相结合的方法，有效简化了手势的建模和匹配过程，实现对特定手势的快速识别.其次，在空间位置定位上，提出了一种高效的基于特征校验的霍夫变换算法：通过摄像头捕获发光球的圆形轮廓以计算其三维空间位置；使用基于直径方程的改进型霍夫梯度算法降低圆形检测识别复杂度；对于连续帧图像，采用了基于可信度的特征校验法则进行快速处理，进一步提高算法整体效率.最后，该方案在沉浸式中学虚拟实验系统中应用，系统运行稳定，具有良好的交互体验.

参考文献

相关文章 9

[1]	于佃存,陈益强,彭晓晖,焦帅,李啸海,钟习. 多元数据融合的非干扰身份识别方法[J]. 计算机研究与发展, 2019, 56(3): 635-642.
[2]	王旋,方河川,常俪琼,王举,陈晓江,房鼎益,彭瑶,陈峰. 基于RFID的免携带设备手势识别关键技术研究[J]. 计算机研究与发展, 2017, 54(12): 2752-2760.
[3]	张凤军, 赵 岭, 安国成, 王宏安, 戴国忠,. 一种尺度自适应的Mean Shift跟踪算法[J]. 计算机研究与发展, 2014, 51(1): 215-224.
[4]	徐荣龙, 刘正捷,. 手机三维菜单绩效预测模型[J]. , 2013, 50(4): 891-899.
[5]	吕治国, 李 焱, 徐 昕,. 快速的三维人手运动跟踪方法研究[J]. , 2012, 49(7): 1398-1407.
[6]	李秋洁 茅耀斌 王执铨. CAPTCHA技术研究综述[J]. , 2012, 49(3): 469-480.
[7]	朱英杰, 李淳芃, 马万里, 夏时洪, 张铁林, 王兆其,. 沉浸式虚拟装配中物体交互特征建模方法研究[J]. , 2011, 48(7): 1298-1306.
[8]	郭康德, 张明敏, 孙 超, 李 扬, 汤 兴,. 基于视觉技术的三维指尖跟踪算法[J]. , 2010, 47(6): 1013-1019.
[9]	张良国, 高 文, 陈熙霖, 陈益强, 王春立,. 面向中等词汇量的中国手语视觉识别系统[J]. , 2006, 43(3): 476-482.

PDF全文下载地址:

https://crad.ict.ac.cn/CN/article/downloadArticleFile.do?attachType=PDF&id=3839