基于Intel RealSense的展示系统交互功能的实现

张胜男 司占军 刘颖

摘要：随着计算机网络以及便携式智能设备的发展，人们已不满足于传统的人机交互形式，交互形式逐渐从传统界面、键盘鼠标等输入输出设备慢慢发展屏幕触摸、姿势追踪、生物及动作的识别。体感技术作为人机交互的一种新形势，深受科技开发公司喜爱。以旋转功能为例，介绍如何利用Intel RealSense SDK rX7ZUnity 3d引擎实现展示系统通过手势控制来实现旋转、缩放、移动等交互功能，这是该文将要介绍的重点内容。

关键词：IntelRealSense;交互功能;手势控制;Unity3d

中图分类号：TP37 文献标识码：A

文章编号：1009-3044（2019）33-0251-02

人体行为识别是一个新兴的研究领域，其涉及图像处理、模式识别、人工智能等多门学科，并在智能监控人机交互、智能机器人、虚拟现实和运动分析等领域有着广泛的应用。IntelRealsense技术的出现使得用户与电脑、移动设备之间的交互更加具有趣味性以及智能性，在两者的交互过程中可以增加展示产品的印象认知深度，缩短距离感。

1Intd RealSease技术

Intel Realsense技术提供了业界第一款且是尺寸最小的PC端集成式前置3D摄像头，并提供了软件开发工具包SDK，功能上包括手势识别、3D脸部识别、3D增强现实、语音识别、Uni-ty工具集、物体追踪、表情侦测、背景移除、浏览器支持等。其中，基于IntelRealSense提供的手势识别、跟踪等功能，使用者可以无接触的控制虚拟世界的模型，在游戏里面畅游。手势识别和跟踪功能大大突破了以往需要手柄操作的交互体验，真实的场景感觉给用户带来的更加刺激的娱乐感觉和极大的挑战。

2展示系统交互功能的实现

2.1前期准备

前期准备工作主要为3DMAX汽车及展厅的模型构建、相关的纹理贴图、展示系统的背景音乐选取与制作、uI素材的收集与制作等多项工作如图1、图2所示。

2.2 unity场景搭建

首先需要搭建3D摄像头运行环境，即安装Inter RealSenseSDK。具体步骤如下：①SDK官网下载个人所需的SDK型号，本系统采用的是SR300摄像头;②下载安装软件后，打开SDK程序，连接Inter RealSense摄像头，调试运行状态是否正确（打开界面图如图3所示），双击（Front）模块，运行摄像头，若运行成功，可成功捕捉到肢体动作;③打开unity中的文件夹，导人Uni-tv的手势追踪包：点击菜单栏中Assets-Import Package-选择SDK文件夹导入，文件夹中包含InterRealSense的集中手势以及例子，连接到Inter RealSense摄像头，可观察例子的运行效果，如圖4所示。

接下来需要将前期准备的所有模型与素材导人到Unity中，进行基本场景的搭建。将导入的模型拖拽到hierarchy窗口中形成预制件，将模型摆放至sense窗口中合适的位置，并通过Inspector-Transfom进行细微的调整以及比例的调整，运行程序在game中查看具体摆放位置及比例。

2.3设置手势实现交互功能

模型需要实现的功能有移动、缩放、旋转，其中功能实现操作步骤相似，本文将以旋转来介绍如何实现手势控制物品。新建GameObject，并添加旋转物体的代码脚本，将模型拖拽给Traget后，通过赋予GameObject三个sendmessage分别来控制时间的开始，追踪，结束，如图5所示。在第一个sendmessage上选择手势以及需要触发的事件;第二个sendmessage选择HandTracking，在上面有一个Event Source，选择追踪模型为手势追踪，即通过手势实现物品的控制，在FunctionName中填写0nTracking;在第三个sendmessage选择Hand Opennd，在下面的FunctionName中填写On End，即在摄像头检测到你的手是张开的状态下或者当摄像头捕捉不到手势时候自然就会停止事件。

2.4测试与发布

点击运行进行测试完善，通过File-Build Setting-AddOpen Sense进行场景添加，然后通过点击File-Build&Run-Platform，选择PC端后进行打包发布，完成整个系统的制作。

3结束语

本文主要介绍了Intel RealSense技术以及基于Intel Re-alSense技术的手势交互功能的实现方法，以旋转功能为例，通过Intel RealSense SDK以及Unity 3D实现了通过手势动作来控制物品的旋转展示。将Intel RealSense技术应用于物品展示系统中，使得系统具有智能、趣味等优点，具有广阔的发展前景。