基于移动设备上增强现实系统的自然手势控制与研究.PDFVIP

第27卷 第3期 电子设计工程 2019年2月 Vol.27 No.3 ElectronicDesignEngineering Feb.2019 基于移动设备上增强现实系统的自然手势控制与研究 宋隆瀚 （华润电力投资有限公司东北分公司辽宁 沈阳 110043） 摘要：在实验中，搭建了一个基于Android设备上增强现实系统的手势控制系统，整个系统的核心 在于通过LeapMotion提供的API编写程序来识别自定义手势部分。但是为了能够更直观的体验 手势控制的交互方式，在实验中加入了增强现实的模块，该部分是通过一款增强现实的软件AR⁃ ToolKit以及Android设备实现的。整个系统的实际运行过程是：手势识别程序通过控制器识别出 手势，并将手势编号通过WiFi发送给Android端程序，Android程序根据编号切换图片，运行于PC 端的ARToolKit程序通过摄像头识别图片，加载3D动画。 关键词：手势控制；增强现实；移动设备；人机交互 中图分类号：TP393 文献标识码：A 文章编号：1674-6236（2019）03-0043-07 ControlandresearchofnaturalgesturesbasedonAndroidandaugmented realitysystem SONGLong⁃han （HuarunPowerInvestmentCo.，Ltd.NortheasternBranch，Shenyang 110043，China） Abstract: Undertheprotocol，wesetupagesturescontrolsystembasedonAndroidandAugmented Realitysystem.Themostimportantapartmentofthesystemisprogrammingtorecognizeuser-defined gestureswithAPIofferedbyLeapMotion.However，weaddAugmentedRealitysystemtotheexperiment forbetterdirectfeels，andthesystemisbasedonasoftwarenamedARToolKitandAndroiddevice.The operationalprocessofwholesystemis:First，programforgesturerecognitionrecognizethegestureby LeapMotionandsendthenumberofthegesturetotheAndroiddevicebyWiFi.Then，program，running onAndroiddevice，changethepicturebythenumber.Atlast，ARToolKitprogramrecognizethepicture anduploadThree-dimensionalanimation. Keywords:gesturecontrol；augmentedreality；Androiddevice；human-computerinteraction 近30年来，个人电脑的性能已经有了飞跃式的 公司，它主要是面向PC以及Mac的，LeapMotion[6-7] [8-10] 提升，但人与电脑之间的交互方式却没有太多的变 就是这家公司制造的一款可以进行手势识别 的