一种大屏幕人机交互系统的实现方法

计算机工程与应用 ›› 2012, Vol. 48 ›› Issue (1): 176-179.

• 图形、图像、模式识别 • 上一篇下一篇

一种大屏幕人机交互系统的实现方法

郭星1，2，刘政怡1，2，李炜1，2，吴建国2，3

1.安徽大学计算机科学与技术学院，合肥 230039
2.安徽大学计算智能与信号处理教育部重点实验室，合肥 230039
3.安徽大学软件学院，合肥 230039

收稿日期:1900-01-01 修回日期:1900-01-01 出版日期:2012-01-01 发布日期:2012-01-01

Implementation method of human-computer interaction system with large screen

GUO Xing1，2, LIU Zhengyi1，2, LI Wei1，2, WU Jianguo2，3

1.School of Computer Science and Technology, Anhui University, Hefei 230039, China
2.Key Lab of Intelligent Computing & Signal Processing of MoE, Anhui University, Hefei 230039, China
3.School of Software Engineering, Anhui University, Hefei 230039, China

Received:1900-01-01 Revised:1900-01-01 Online:2012-01-01 Published:2012-01-01

摘要/Abstract

摘要： 针对利用双目立体视觉技术实现大屏幕人机交互系统时摄像头标定复杂的问题, 提出一种大屏幕人机交互系统的实现方法。由两个摄像头负责采集用户手部的图像，获取指尖的二维图像位置坐标，通过透视投影模型，由测量所得的两个摄像头之间的距离、大屏幕左边与摄像头之间的距离、摄像头离地面的高度、大屏幕底边离地面的高度等数据，求出地面上与指尖成像在同一位置的地面坐标，由摄像头的位置及地面坐标求出一条直线，两条直线相交获取指尖空间坐标，由指尖空间坐标选取与屏幕对应的二维平面坐标，经物理坐标到逻辑坐标转换求出手指指向屏幕的实际坐标，实现大屏幕的定位。定位完成后，采用指尖检测方法检测视频图像中指尖是否存在，以此判断食指弯曲和伸开的点击操作。指尖空间坐标的计算方法虽然存在误差，但由于用户在操作过程中能够实时看到鼠标的位置，因此该误差对用户是透明的，而这种方法以简单的、近似的求解避免了复杂的摄像头标定过程，便于系统工程的实施。

关键词: 大屏幕, 人机交互, 双目视觉, 透视投影

Abstract: To avoid camera calibration in the implementation of human-computer interaction system with large screen based on binocular stereo vision, one approximate and easy method is proposed. The distance between two cameras, left camera and the left side of screen, cameras and floor, the bottom side of screen and floor are measured to find the point of floor which is imaged as the same point with fingertip based on perspective projection model. One camera is connected with the point of floor as one space line. Two lines are intersected at the three-dimension spatial coordinate of fingertip served to position two-dimensional coordinate in the large screen. Mouse click is simulated by bend and stretch of index finger achieved by fingertip detection algorithm. Users are not aware of error even if position pointed by finger is inaccurate because mouse is seen by users when they move the hand. The method proposed is easier and more convenient than calibration method due to inaccurate position not seen by users so that system can be rapidly accomplished.

Key words: large screen, human-computer interaction, binocular vision, perspective projection

郭星1，2，刘政怡1，2，李炜1，2，吴建国2，3. 一种大屏幕人机交互系统的实现方法[J]. 计算机工程与应用, 2012, 48(1): 176-179.

GUO Xing1，2, LIU Zhengyi1，2, LI Wei1，2, WU Jianguo2，3. Implementation method of human-computer interaction system with large screen[J]. Computer Engineering and Applications, 2012, 48(1): 176-179.

[1]	谭立行，鲁嘉淇，张笑楠，刘宇红，张荣芬. 基于轻量级OpenPose改进的幻影机手势交互系统[J]. 计算机工程与应用, 2021, 57(16): 159-166.
[2]	林雅南，陈婉清，郑世珏，杨青. AR技术在中国历史典故展示中的应用研究[J]. 计算机工程与应用, 2021, 57(14): 275-280.
[3]	解迎刚，兰江雨. 协作机器人及其运动规划方法研究综述[J]. 计算机工程与应用, 2021, 57(13): 18-33.
[4]	王琪，闵华松. 双臂机器人的协调控制算法综述[J]. 计算机工程与应用, 2021, 57(1): 1-16.
[5]	李婷婷，王相海. 基于AR-VR混合技术的儿童智力开发系统研究[J]. 计算机工程与应用, 2020, 56(23): 259-264.
[6]	郭娜，王田苗，胡磊，刘洪升，王昱涵，俞国鑫，宋雄康，耿宝多，杨标. ACL重建手术增强现实导航系统的人机交互技术[J]. 计算机工程与应用, 2020, 56(21): 224-230.
[7]	潘卫华，杜旭. 基于改进自适应权重的三边滤波立体匹配算法[J]. 计算机工程与应用, 2020, 56(18): 186-192.
[8]	武曌晗，荣学文，范永. 导盲机器人研究现状综述[J]. 计算机工程与应用, 2020, 56(14): 1-13.
[9]	杜丽美，连玮. 高斯投影下的人机交互式物体仿真算法研究[J]. 计算机工程与应用, 2020, 56(11): 185-191.
[10]	谷学静，王旭，阚阔. Leap Motion手势交互层次化校正方法研究[J]. 计算机工程与应用, 2020, 56(10): 220-225.
[11]	卫兵，王则灵，李宜兵. 眨眼与哈欠提取新方法及其适用性研究[J]. 计算机工程与应用, 2019, 55(7): 168-174.
[12]	张霞，胡晋嘉，陈里里，陈仁祥. 运动辅助的CPG控制及其关键参数分析[J]. 计算机工程与应用, 2019, 55(17): 239-245.
[13]	赵玉婷，钮建伟，张人杰，刘海笑，冉令华. 卷积神经网络用于关节角度识别与姿势评估[J]. 计算机工程与应用, 2019, 55(16): 209-216.
[14]	杨世强，弓逯琦，乔丹. 人机交互装配中手部指形轮廓信息检测方法[J]. 计算机工程与应用, 2018, 54(8): 226-230.
[15]	马龙，孙铭泽，黄超，裴昕，周航，张鸿燕. 基于强相似点检测快速双目立体匹配算法[J]. 计算机工程与应用, 2018, 54(6): 193-197.

一种大屏幕人机交互系统的实现方法

Implementation method of human-computer interaction system with large screen

PDF

可视化

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 15

编辑推荐

Metrics