基于单摄像头的自然用户接口引擎开发

来源期刊：北方工业大学学报2015年第1期

论文作者：宋伟 于少波 黎佳雪 王辉柏

文章页码：20 - 70

关键词：自然用户接口;人机交互;GPU编程;混合现实技术;无触摸操作;实时图像处理;

摘    要：自然用户接口(NUI)通过自然且直观的操作方法实现了人机交互中的控制接口,是人机交互手段研究的一个新兴的方向.本文利用廉价的网络摄像头作为NUI应用的信号输入端,设计了一套基于单摄像头的NUI结构,并通过融合CUDA工具包和DirectX软件开发包(SDK),开发了实时的NUI引擎系统.引擎使用网络摄像头进行视频捕捉后,利用图形处理器(GPU)编程方法实现实时的图形处理,并结合DirectX SDK展示NUI应用.为了检验所提出的实时NUI引擎的性能,本文利用其开发了若干非触摸操作的混合现实游戏和应用,实验结果表明本引擎实现了实时直观的交互式操作.