Hand CV欲成为VR界的搜狗输入法

Category: 
Hand CV欲成为VR界的搜狗输入法
2016年9月23

英梅吉CEO朱郁丛向黑匣表示,他们用于VR/AR领域的手势交互方案——Hand CV要扮演的角色,正如PC上的搜狗输入法。

 

 

与如今电脑上的各种输入法相比,十多年前的输入法功能显得相当蹩脚。曾风靡中国市场多年的智能ABC,用户甚至得记住字词排在第几页。而现在,基于搜索引擎技术的二代输入法,已经实现相当高的智能化,大大提升了用户打字的效率。
 
 
北京英梅吉科技CEO朱郁丛向黑匣表示,他们用于VR/AR领域的手势交互方案——Hand CV要扮演的角色,正如PC上的搜狗输入法。
 
 

一款单目手势交互产品

 
 
戴着VR眼镜用手势控制应用,炒菜时用油腻的手隔空控制平板电脑,维修电器时戴着AR眼镜用手势翻阅手册......假如VR/AR普及了,这些只是极其普通的应用场景,可是我们现在似乎还难以实现。

工信部于9月发布的《2016年虚拟现实产业发展白皮书》一针见血地指出,当前的VR行业面临硬件性能跟不上,设备使用不便的问题。而硬件性能和交互的不便,又进一步造成了软件应用的局限性。
 
 
正是在这样的情况下,英梅吉推出了手势交互技术Hand CV。Hand CV是基于单目摄像头的手势交互系统及手势识别SDK,它基于普通单目摄像头(如手机、平板、PC等设备的普通摄像头),通过软件算法来实现手势识别。
 
 
从交互方式来说,高端的VR设备如Oculus Rift和HTC Vive,其配套的手柄已经实现了较为自然的控制,不过高昂的费用让人望而却步。类Gear VR产品主要通过触摸板的点触实现控制,首先它不是沉浸式的操作方式,其次,它无法输入空间位置信息,应用场景相对有限。
 
 
因此,Hand CV的目标市场选在了基于手机的移动VR市场。朱郁丛告诉黑匣,如今市场存量最大的产品是Cardboard类产品,占了市场上VR设备的七八成以上。这些产品主要借助手机陀螺仪的功能,配合使用者的头部动作进行操作。
 
 
相比起20年前蹩脚的全拼输入法,移动VR目前采用的交互方式丝毫不见得更高明。玩家为了实现简单的点击,不得不摒弃杂念盯着一点。这样的交互方式,连简单的《连连看》都玩不了。

朱郁丛告诉黑匣,Hand CV通过识别7种不同的手势,实现了一些基础的轻交互功能,如确定、点选及拖拽。用户在头戴VR设备时,可以用手势完成点选菜单、音乐播放控制等操作。操作十分简便,而且不用摘下VR设备。更重要的是,该方案适用于普通的手机摄像头,不需要另外购买外设,也不需要特殊的深度摄像头。
 
 

曾瞄准虚拟穿戴市场

 
虽然如今定位在移动VR/AR的交互领域,但一年之前的今天,朱郁丛的团队还在进行虚拟试衣的项目。
 
 
自2014年创办英梅吉后,英梅吉尝试过VR硬件,还为四川剑门关景区做过商用的VR项目,发现难以实现便利的交互方案。当时,他们团队主攻的方向是虚拟穿戴,他们甚至想过要建立一个主打虚拟穿戴的电商平台。
 
 
不过,为什么后来又瞄准了VR的手势交互市场?朱郁丛告诉黑匣,当时市场的推广并没有预想中迅速。他们发现,虚拟穿戴并不是用户的刚需,解决的不是一个特别痛点的问题,因此很难快速规模化。

郁丛透露,英梅吉团队拥有十几年计算机视觉的开发背景,在图像识别,人脸识别,动作手势识别,3D引擎等方面都拥有自主知识产权,2015年还申请了基于单目摄像头的手势识别跟交互专利。
 
 
“当时有很多选择,比如专门做面部识别也可以。”朱郁丛告诉黑匣,Oculus被Facebook巨资收购后VR被很多人看好,但是大家都不清楚国内几年内能发展到什么程度,当时仍保持观望态度。
 
 
后来,朱郁丛通过许多VR领域的朋友获悉,VR行业正处于高端设备难以普及,VR交互方案匮乏的状态。“我们觉得这确实是个问题,于是把之前的技术翻出来做迭代,进一步提高鲁棒性,后来推出了基于单目摄像头的手势交互技术Hand CV。”朱郁丛表示。
 
 

VR界的搜狗输入法

 
目前市场上已经有一些做手势识别的方案,如uSens和微动等,探索的功能包括更为复杂的手势交互。英梅吉为什么把Hand CV定位在做基础功能手势识别,而且要怎么利用它来实现盈利?
 
 
朱郁丛告诉黑匣,Hand CV直接的商业模式为技术授权,即面向所有硬件、软件开发商输出SDK,通过授权费和游戏分成获得收益。而当其SDK覆盖足够多的终端用户后,还可以延伸出更多的产品服务,探索其它盈利模式。

“Hand CV就像搜狗输入法一样,它是一款比较基础的应用,但对于VR的生态是必不可少的。”朱郁丛表示,假如产品覆盖了足够多的终端,就有了做广告的用户基础。此外,只要获得了足够多的用户行为数据,也可以做一个类似友盟的产品。这些都是后续可能的盈利手段。
 
 
据黑匣了解,英梅吉已经跟MasterCard达成了一个全球的合作,将会在十月份推出一个VR内的手势支付方案。此外,朱郁丛透露,英梅吉跟内容平台优酷VR、UtoVR,电视厂商海信,AR硬件厂商影创科技和一些游戏厂商等建立了合作,之后还可能推出VR游戏分发平台。
 
 
“虽然已经做得很深了,我们的算法还在进一步不断优化,可能在12月或1月份或推一个比较重量级的版本出来,把我们基于最新的卷积神经网络训练出来的算法融入到里面去,结合几种不同的算法取一个权重去推一个解决方案。”朱郁丛表示,“打铁还需自身硬,我们把自己做好就行了。”

相关文章

VRrOOm Wechat