Page 79 - 《软件学报》2021年第10期

软件学报 ISSN 1000-9825, CODEN RUXUEW E-mail: jos@iscas.ac.cn
Journal of Software,2021,32(10):30513067 [doi: 10.13328/j.cnki.jos.006217] http://www.jos.org.cn
©中国科学院软件研究所版权所有. Tel: +86-10-62562563


动态手势理解与交互综述 

1,2
1,2
1
1,2
1,2
张 维 , 林泽一 , 程 坚 , 柯铭雨 , 邓小明 , 王宏安 1
1
(人机交互北京市重点实验室(中国科学院 软件研究所),北京 100190)
2
(中国科学院大学,北京 101408)
通讯作者: 邓小明, E-mail: xiaoming@iscas.ac.cn; 王宏安, hongan@iscas.ac.cn

摘 要: 近年来,手势作为一种输入通道,已在人机交互、虚拟现实等领域得到了广泛的应用,引起了研究者的关
注.特别是随着先进人机交互技术的出现以及计算机技术(特别是深度学习、GPU 并行计算等)的飞速发展,手势理
解和交互方法取得了突破性的成果,引发了研究的热潮.综述了动态手势理解与交互的研究进展与典型应用:首先阐
述手势交互的核心概念,分析了动态手势识别与检测进展;而后阐述了动态手势交互在人机交互中的代表性应用,并
总结了手势交互现状,分析了下一步的发展趋势.
关键词: 手势交互;动态手势理解;人机交互
中图法分类号: TP18

中文引用格式: 张维,林泽一,程坚,柯铭雨,邓小明,王宏安.动态手势理解与交互综述.软件学报,2021,32(10):30513067.
http://www.jos.org.cn/1000-9825/6217.htm
英文引用格式: Zhang W, Lin ZY, Cheng J, Ke MY, Deng XM, Wang HA. Survey of dynamic hand gesture understanding and
interaction. Ruan Jian Xue Bao/Journal of Software, 2021,32(10):30513067 (in Chinese). http://www.jos.org.cn/1000-9825/6217.
htm
Survey of Dynamic Hand Gesture Understanding and Interaction

1,2
1,2
1,2
1,2
1
ZHANG Wei , LIN Ze-Yi , CHENG Jian , KE Ming-Yu , DENG Xiao-Ming , WANG Hong-An 1
1
(Beijing Key Laboratory of Human-computer Interactions (Institute of Software, Chinese Academy of Sciences), Beijing 100190, China)
2
(University of Chinese Academy of Sciences, Beijing 101408, China)
Abstract: In recent years, hand gesture has been widely used in human-computer interaction, virtual reality, and other fields as an input
channel. Especially, with the emergence of advanced technology of human-computer interaction and the rapid development of computer
technology (such as deep learning, GPU, parallel computation technology, etc.), gesture understanding and interaction methods have made
breakthroughs. This paper reviews the research progress of dynamic gesture understanding and typical interaction applications. Firstly, the
core concepts of gesture interactions are elaborated. Secondly, the progress of dynamic gesture recognition and detection is introduced.
Thirdly, the representative applications of dynamic gesture interaction are elaborated. Finally, the future development trend of gesture
interaction is discussed.
Key words: hand gesture interaction; dynamic hand gesture understanding; human-computer interaction

手势交互技术是通过捕获人手的肢体动作,并将其转化为相应的命令来对设备进行操作的技术,手势已成
为继键盘、鼠标和触屏之后新型和主流的人机交互通道 [1,2] .手势交互系统主要分为几部分:人、手势输入设备、
手势分析和识别设备、被操作的设备或界面.ACM SIGCHI 年会的相关论坛多次把自然人机交互限定为触摸和
[3]
手势的交互方式.在 Gartner 发布的 2017 年度人机交互技术优先级矩阵中,增强现实(augmented reality)、混合

 基金项目: 国家重点研发计划(2018YFC0809300)
Foundation item: National Key Research and Development Project of China (2018YFC0809300)
收稿时间: 2020-02-21; 修改时间: 2020-05-10; 采用时间: 2020-07-10; jos 在线出版时间: 2021-01-15