账号注册
如果您已有账号,请登录

最新资讯

HoloLens超全手势交互指南以及最新更新的一系列功能和优化!发布时间:2018-11-19

相信大多数软粉们对HoloLens一定都不陌生,甚至更多小伙伴比小编玩的还要6,但是很多小伙伴们对它的印象只是强大的,酷炫的黑科技头显,究竟怎么玩,却一直懵懵懂懂。


本篇文章是微软官网上对HoloLens手势交互的说明,作者做了翻译,并分享给大家~


玩家可以通过手势在混合现实的环境下完成一些指令和操作。HoloLens的交互方式是用目光凝视去定位(同于鼠标光标移动处),然后用手势或者声音来操控任何一个被定位到的目标(同于鼠标点击)。


虽然手势无法在空间中准确地进行定位,但它的优点是能让用户在戴上HoloLens头显后快速地进行操作,无需再拿其他装备。


一、凝视与行动(Gaze-and-commit)

手势交互的定位机制是凝视。凝视和空中点击(Air tap)结合起来构成了凝视与行动这种交互方式。

还有一种替代的交互方式是基于手柄(motion controller)的指向与行动(Point-and-commit)。

在HoloLens和其他沉浸式头显上运行的APP需要支持上述两种交互行为,让用户去选择自己要用何种方式进行输入。

二、HoloLens的两种核心手势

HoloLens目前能够识别两种核心手势——空中点击和Home手势。这两个核心手势是开发者可以获取到的最初级的空间输入单位,为用户进行后续更多样的操作打下了基础。

1. 空中点击(Air tap)

空中点击是一种需要将手直立并进行点击的手势,与鼠标的点选比较相似。

这个手势在许多HoloLens应用中等同于“点击”,当用户通过凝视确定目标后,可以通过Air tap进行点击。只要学会这个手势就可以广泛地在各种应用中使用。

其他表示“点击”的交互方式还有按下HoloLens clicker上的按钮,或者直接说出“Select”。



Air tap是一个独立的手势。虽然官方不是很推荐,但是也可以将独立的核心手势组合成新的、独立的交互行为,例如赋予连续两次空中点击一个新的含义。



2. Home手势(Bloom)

开花的手势在HoloLens中代表“home”,除此之外不赋予它其他含义。这个手势在系统中表示返回开始界面,和Windows的开始按键或者Xbox的主页按键含义相同。




Bloom手势的使用方式是伸出手,掌心向上,将手指聚在一起,然后将手指张开。此外,也可以通过说“Hey Cortana, Go Home”来返回主页。

三、复合手势

App能识别出的其实不止“点击”这个独立的行为。通过将点击、保持、释放和手的位移进行结合,我们可以表现出含义更复杂的复合手势。

这些高级复合手势是以初级空间输入单位(Air tap和Bloom)为基础的。

1. 点击并保持(Tap and hold)

保持(Hold)就是指保持住Air tap中手指向下的姿势。点击加保持的组合为后续更复杂的操作提供了基础,例如需要胳膊移动的点击并拖拽(Click and drag)。当用户想要拿起某个物品而不是打开它时就可以进行这样的交互。

此外,由于用户有可能在进行这些手势交互的过程中放松手指导致姿势变形,有时需要对用户进行提示。

2. 操控(Manipulation)

操控手势可以用于移动、缩放或旋转一个全息影像,适用于用户想要全息影像和手的操作1:1对应的情况,一个例子就是可以让用户进行1:1的绘画等活动。

操控手势的初始目标定位依赖于凝视或设备指向。一旦点击并保持(Tap and hold)的手势被触发,就可以用手势对已选中的物体直接用手进行操控。对目标的定位不再依靠凝视,让用户在行动时可以自由地查看四周。

四、手势识别

HoloLens通过跟踪设备可以看到的单手或双手进行手势识别。

当手处于准备状态(Air tap的手指向上状态)或点击状态(即Air tap的手指压下状态)时,HoloLens可以进行识别,其余手势的姿态会被忽略。

我们可以获取到每只HoloLens检测到的手的位置及点击状态。当手靠近可识别范围的边界时,设备会告知越界的方向,开发者可以展示给用户以便他们明白要把手放回到HoloLens可以检测到的范围内。

五、手势的识别范围

在HoloLens中,手势必须放在相机能够准确识别的范围内进行(大致是从脖子到腰与两肩之间的范围)。

我们需要训练用户在这一范围内进行操作,既能提高识别的准确率,也能让用户在使用产品时更舒适(刚开始许多用户会认为用手进行交互时,必须要将手放在HoloLens的视野范围内,因此会刻意地将手举高进行交互,这样做会很难受)。

此外,进行连续的手势交互时,可能会出现用户在手势操作中就将手指移出可识别范围的情况(例如将一个物体拖拽平移),这会导致无法达到用户预期的结果。

为头显带来一系列的新功能和优化

微软已经告知HoloLens用户,他们将为HoloLens头显强制升级。这是作为Windows 10 October 2018版本的一部分,并能为头显带来一系列的新功能和优化。


新版本带来了名为Miracast Support的功能,其能够允许HoloLens用户将视图分享给支持Miracast协议的显示器。新版本同时增加了额外的分享选项(如将截图发送至附近Windows设备的Windows Nearby Sharing),以及在Edge增加了一个Share按钮。


不仅如此,新版本同时添加了一个新的快速操作菜单,可允许你方便地访问频繁使用的系统任务(如启动和停止视频录制)。微软同时为用户带来了一个新的通知UI,允许用户以与在PC上相同的方式查看和处理通知。

微软同时没有忘记开发者,因为新版本将支持应用程序对Mixed Reality Capture的集成(借助Windows的camera capture UI和一定的代码)。





评论
您的称呼:
您的评论: