基于Leap Motion的虚拟农作物人机交互系统设计

传统的虚拟植物人机交互系统一般运行在特定的操作系统或者移动平台上,而交互方式多是通过鼠标键盘进行人机交互,需要用户输入较为繁琐的参数和命令,导致系统用户缺乏良好的交互体验。针对上述情况,该本文基于云计算和体感交互技术,设计开发了虚拟农作物体感交互系统。系统先在云端计算生成虚拟农作物的三维模型,并将这些模型保存在云端。随后,由系统前端的Leap Motion体感控制器采集用户手部信息数据,通过本地计算机对数据进行处理,识别出各种各样的手势,再与浏览器上Web GL绘制成的虚拟植物进行实时交互,从而实现植物的平移、旋转、生长、形态变化以及三维模型的更新等操作。详细介绍了Leap Motion手势识别的基本原理,虚拟农作物体感交互系统的总体框架,农作物的测量和虚拟模型的生成,数据交互协议的设计原理,Web GL图形绘制以及单双手手势交互库的建立等关键技术。该系统已经由Web GL编程实现,试验结果表明,使用该文研发的系统,用户在浏览器上可以通过不同的手势对虚拟作物模型的形态和生长进行实时调控,具有良好的交互体验。该系统的建立,可为国内外同类研究提供技术上的参考。