Hololens入门之凝视

原创 2016年08月31日 15:15:53

Hololens入门之凝视射线

凝视是HoloLens首要输入方式,形式功能类似于桌面系统的光标,用于选择操作全息对象。然而在Unity中并没有明确的Gaze API或者组件。

概念上来说,Gaze是通过用户头部两眼之间发出一条向前方的射线来实现的,射线可以识别它所碰撞的物体。在Unity中,使用Main Camera来表示用户头部的位置和朝向。准确的说,是指UnityEngine.Camera.main.transform.forward 和 UnityEngine.Camera.main.transform.position.调用Physics.RayCast 发出射线后可以得到RaycastHit结果,该结果包含了碰撞点的3D位置参数和碰撞对象。


实现Gaze的示例:

可以直接使用HoloToolkit中的GazeManager.cs脚本来实现凝视射线。 关于HoloToolKit的使用,本文不再做描述,可以参考上一篇文章。

1、添加GazeManager.cs

点击“ Create Empty” 创建一个空游戏对象,并将其命名为 Manager,为 Manager对象添加核心脚本组件GazeManager.cs

// Copyright (c) Microsoft Corporation. All rights reserved.
// Licensed under the MIT License. See LICENSE in the project root for license information.

using UnityEngine;
using UnityEngine.VR.WSA;

namespace HoloToolkit.Unity
{
    /// <summary>
    /// GazeManager determines the location of the user's gaze, hit position and normals.
    /// </summary>
    public partial class GazeManager : Singleton<GazeManager>
    {
        [Tooltip("Maximum gaze distance, in meters, for calculating a hit.")]
        public float MaxGazeDistance = 15.0f;

        [Tooltip("Select the layers raycast should target.")]
        public LayerMask RaycastLayerMask = Physics.DefaultRaycastLayers;

        /// <summary>
        /// Physics.Raycast result is true if it hits a hologram.
        /// </summary>
        public bool Hit { get; private set; }

        /// <summary>
        /// HitInfo property gives access
        /// to RaycastHit public members.
        /// </summary>
        public RaycastHit HitInfo { get; private set; }

        /// <summary>
        /// Position of the intersection of the user's gaze and the holograms in the scene.
        /// </summary>
        public Vector3 Position { get; private set; }

        /// <summary>
        /// RaycastHit Normal direction.
        /// </summary>
        public Vector3 Normal { get; private set; }

        /// <summary>
        /// Object currently being focused on.
        /// </summary>
        public GameObject FocusedObject { get; private set; }

        [Tooltip("Checking enables SetFocusPointForFrame to set the stabilization plane.")]
        public bool SetStabilizationPlane = true;
        [Tooltip("Lerp speed when moving focus point closer.")]
        public float LerpStabilizationPlanePowerCloser = 4.0f;
        [Tooltip("Lerp speed when moving focus point farther away.")]
        public float LerpStabilizationPlanePowerFarther = 7.0f;

        private Vector3 gazeOrigin;
        private Vector3 gazeDirection;
        private float lastHitDistance = 15.0f;

        private void Update()
        {
            gazeOrigin = Camera.main.transform.position;
            gazeDirection = Camera.main.transform.forward;

            UpdateRaycast();
            UpdateStabilizationPlane();
        }

        /// <summary>
        /// Calculates the Raycast hit position and normal.
        /// </summary>
        private void UpdateRaycast()
        {
            // Get the raycast hit information from Unity's physics system.
            RaycastHit hitInfo;
            Hit = Physics.Raycast(gazeOrigin,
                           gazeDirection,
                           out hitInfo,
                           MaxGazeDistance,
                           RaycastLayerMask);

            GameObject oldFocusedObject = FocusedObject;
            // Update the HitInfo property so other classes can use this hit information.
            HitInfo = hitInfo;

            if (Hit)
            {
                // If the raycast hits a hologram, set the position and normal to match the intersection point.
                Position = hitInfo.point;
                Normal = hitInfo.normal;
                lastHitDistance = hitInfo.distance;
                FocusedObject = hitInfo.collider.gameObject;
            }
            else
            {
                // If the raycast does not hit a hologram, default the position to last hit distance in front of the user,
                // and the normal to face the user.
                Position = gazeOrigin + (gazeDirection * lastHitDistance);
                Normal = -gazeDirection;
                FocusedObject = null;
            }

            // Check if the currently hit object has changed
            if (oldFocusedObject != FocusedObject)
            {
                if (oldFocusedObject != null)
                {
                    oldFocusedObject.SendMessage("OnGazeLeave", SendMessageOptions.DontRequireReceiver);
                }
                if (FocusedObject != null)
                {
                    FocusedObject.SendMessage("OnGazeEnter", SendMessageOptions.DontRequireReceiver);
                }
            }
        }

        /// <summary>
        /// Adds the stabilization plane modifier if it's enabled and if it doesn't exist yet.
        /// </summary>
        private void UpdateStabilizationPlane()
        {
            // We want to use the stabilization logic.
            if (SetStabilizationPlane)
            {
                // Check if it exists in the scene.
                if (StabilizationPlaneModifier.Instance == null)
                {
                    // If not, add it to us.
                    gameObject.AddComponent<StabilizationPlaneModifier>();
                }
            }

            if (StabilizationPlaneModifier.Instance)
            {
                StabilizationPlaneModifier.Instance.SetStabilizationPlane = SetStabilizationPlane;
            }
        }
    }
}


2、创建一个新的游戏对象Cube,用来测试凝视效果


3、添加Cursor

就像PC使用鼠标来选中和交互图标一样,你可以为凝视也实现一个指针来更好的代表用户的凝视。

从 HoloToolkit/Input/Prefabs/ 目录下拖拽 Cursor Prefab 组件到场景中。这样当凝视在全息对象时,其表面会出现一个蓝色的光圈,表示当前凝视该对象,当射线离开该游戏对象时,Cursor变成一个点光源,以此来区分是否凝视游戏对象。

可以查看到Cursor中存在两个光标对象,分别是凝视在对象上及离开光息对象时分别显示的光标


CursorManager.cs

// Copyright (c) Microsoft Corporation. All rights reserved.
// Licensed under the MIT License. See LICENSE in the project root for license information.

using HoloToolkit.Unity;
using UnityEngine;

/// <summary>
/// CursorManager class takes Cursor GameObjects.
/// One that is on Holograms and another off Holograms.
/// 1. Shows the appropriate Cursor when a Hologram is hit.
/// 2. Places the appropriate Cursor at the hit position.
/// 3. Matches the Cursor normal to the hit surface.
/// </summary>
public partial class CursorManager : Singleton<CursorManager>
{
    //凝视射线在全息对象上时显示的光标对象
    [Tooltip("Drag the Cursor object to show when it hits a hologram.")]
    public GameObject CursorOnHolograms;
    //凝视射线离开全息对象时显示的光标对象
    [Tooltip("Drag the Cursor object to show when it does not hit a hologram.")]
    public GameObject CursorOffHolograms;

    [Tooltip("Distance, in meters, to offset the cursor from the collision point.")]
    public float DistanceFromCollision = 0.01f;

    void Awake()
    {
        //当未设定光标对象时直接返回
        if (CursorOnHolograms == null || CursorOffHolograms == null)
        {
            return;
        }
        
        // Hide the Cursors to begin with.
        CursorOnHolograms.SetActive(false);
        CursorOffHolograms.SetActive(false);
    }

    void LateUpdate()
    {
        if (GazeManager.Instance == null || CursorOnHolograms == null || CursorOffHolograms == null)
        {
            return;
        }
        //当凝视射线在全息对象上及离开全息对象时,分别显示不同的光标对象,以此来进行区分
        if (GazeManager.Instance.Hit)
        {
            CursorOnHolograms.SetActive(true);
            CursorOffHolograms.SetActive(false);
        }
        else
        {
            CursorOffHolograms.SetActive(true);
            CursorOnHolograms.SetActive(false);
        }

        //计算并安置光标
        // Place the cursor at the calculated position.
        this.gameObject.transform.position = GazeManager.Instance.Position + GazeManager.Instance.Normal * DistanceFromCollision;

        // Orient the cursor to match the surface being gazed at.
        gameObject.transform.up = GazeManager.Instance.Normal;
    }
}

4、运行测试

当凝视射线在Cube上时,出现蓝色的光圈,表示当前凝视的点在该位置



当凝视射线离开Cube时,光标显示为一个点光源



版权声明:本文为博主原创文章,未经博主允许不得转载。

Hololens官方教程精简版 - 03. Gaze(凝视)

前言个人建议,学习Holograms 210之前,一定完成《Hololens官方教程精简版 - 02. Introduction with Device》的学习。本篇集中学习凝视功能,完成以下目标: ...

Hololens的凝视交互

用凝视做交互
  • ILYPL
  • ILYPL
  • 2017年02月13日 14:14
  • 519

Unity.VR.05之3D凝视进度条的实现

VR Smaples中的凝视环可以加强玩家的交互体验并防止玩家的误操作,通过UGUI中的Image和Slider的组件就可以轻松实现。但在VR游戏之中,我们有时候会需要一些3D网格对象制作的滑动进度条...

Unity.VR.02凝视点(准心)及其交互

这篇文章主要介绍VR Samples中摄像机投射的凝视点(准心)是如何通过判定摄像机距离及投射物表面来显示合适的比例以及正确的朝向的,还讲解了一种常见的通过凝视环填充进行确认选择的简单交互方式。...

Hololens入门之使用Unity开发一个简单的应用

Hololens入门之使用Unity开发一个简单的应用 一、Hololens概述 Hololens有以下特性 1、空间映射 借助微软特殊定制的全息处理单元(HPU),HoloLen...

Hololens入门之使用Unity开发一个简单的应用

Hololens入门之使用Unity开发一个简单的应用 一、Hololens概述 Hololens有以下特性 1、空间映射 借助微软特殊定制的全息处理单元(HPU),HoloLens 实现了对周边环境...
  • sun_t89
  • sun_t89
  • 2016年08月22日 09:11
  • 13758

Hololens入门之空间锚与场景保持

Hololens入门之空间锚与场景保持 World Anchor(空间锚)提供了一种能够将物体保留在特定位置和旋转状态上的方法。这保证了全息对象的稳定性,同时提供了后续在真实世界中保持全息对象位置的...
  • sun_t89
  • sun_t89
  • 2016年09月04日 15:49
  • 6335

Hololens 学习摘要及翻译记录 三 Gaze

阅朗微软官方文档并作出简要记录: https://developer.microsoft.com/zh-cn/windows/holographic/documentation 个人学习记录,有错误欢...

Unity中Oculus VR的UI凝视交互

Oculus VR中的UI凝视交互根据译文《VR中的UI凝视交互》进行的整理和补充,只有实现步骤。 原文链接: 《VR中的UI凝视交互》 http://gad.qq.com/article...

《VR入门系列教程》之18---Oculus代码剖析

代码剖析 原文作者:Tony Parisi     那么,Unity究竟是如何支持Oculus VR运行的?首先,我们来看看Unity场景是如何构建的。在Unity集成开发包中有一个相...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:Hololens入门之凝视
举报原因:
原因补充:

(最多只允许输入30个字)