从智能手机到VR/AR/MR设备,手势识别技术越来越普及。用户可以使用简单的手势来控制操作或与设备交互,将指令简单化。
近日,美国专利商标局曝光了三星的一项新专利,其中介绍了一种利用深感相机进行手势识别的技术。据悉,这种3D相机模块很可能会在2019年应用于部分智能手机和MR头显中,比如华为。
除了三星以外,微软、苹果和Facebook等巨头都纷纷表现出研发这一技术的兴趣。
三星在专利中称,这项手势识别技术可用于识别目标、识别目标动作以及该动作对应的手势类型,激活传感器,结合手部动作类型检测手势,以完成相应的操作。
此外,支持这种手势识别技术的设备需要配置多个传感器,用于识别对象并检测其移动;一个相机模组,用于拍摄物体和物体的移动;控制单元,用于检测对象,根据其手势确定对应类型,并激活传感器(通过动作类型识别手势)。
简单手势识别
另外,电子设备还可以在操作中识别用户的手势变化并且仅激活检测预期手势所需的传感器或者重置传感器以检测预期的手势。此外,该手势识别系统同时也支持对续航的优化。
例如,简单手势包括指向手势和抓握手势。抓取手势可能需要比指向手势更高的帧速率。因此,即使在相同的扩展模式中能够检测到简单手势,但在高刷新率情况下,识别抓取的效果可能更好。因此,头显可以具有各种传感器设置值,以便检测各种简单的手势。
三星还表示,为了检测用户的复杂手势,完整性能模式可以设置为具有最高帧速率的 传感器的模式,即全性能模式,并且IR传感器发射具有最高照明值的IR光。全性能模式,在这种模式下深感相机的刷新率最高,红外线传感器发射的红外光最强。
头显执行如专利图1所示的完整性能模式。下面的图4C可以检测复杂手势#402,并执行与检测到的复杂手势相对应的操作。
扩展工作模式
在FIG. 4B中,可看到VR头显可识别目标手势,将默认工作模式切换为扩展工作模式。在扩展模式下,头显可通过至少一个彩色+深感摄像头识别至少一种手势,而且还会预先存储一些简单的手势模板。
在扩展工作模式下,头显不需要切换模式就能够识别简单的手势#401,并根据手势执行对应操作。
根据专利文档来看,有了这项新专利,用户在实际VR体验中,可以利用手势操作,体验将更加具有沉浸感。此外,眩晕感也会大大降低。当然,具体效果如何,还有待体验。
不过目前,这项技术仍处于研发阶段。至于说三星后续是否会推出该产品则就有待后续的进展了。不过目前来看,支持手势识别的VR头显的确是一个很有新意的想法。
来源:87870