学习笔记（18):HoloLens2开发入门教程-MRTK讲解之EyeTracking及语音识别

本篇学习笔记主要讲解 HoloLens 2 开发入门教程中的 MRTK（Mixed Reality Toolkit）的 EyeTracking 和语音识别功能。

## EyeTracking

HoloLens 2 中的 EyeTracking 功能可以让应用程序能够检测用户的注视点，并根据注视点来响应相应的操作。MRTK 提供了一些组件来支持 EyeTracking 功能。

### GazeProvider

GazeProvider 是一个 MRTK 组件，它可以检测用户的注视点，并在场景中放置一个 Gaze Cursor（注视光标）来指示用户的注视点。要使用 GazeProvider，需要将它添加到场景中的一个物体上。

### EyeTrackingTarget

EyeTrackingTarget 是一个 MRTK 组件，它可以将一个物体标记为 EyeTracking 的目标。当用户的注视点在该物体上时，可以触发相应的操作。要使用 EyeTrackingTarget，需要将它添加到场景中的一个物体上，并设置它的 Trigger Type（触发类型）和 Action（操作）。

### 示例

以下代码演示了如何在 HoloLens 2 上使用 EyeTracking 功能：

using UnityEngine;
using UnityEngine.XR.WSA.Input;
using Microsoft.MixedReality.Toolkit.Input;

public class EyeTrackingExample : MonoBehaviour
{
    private GazeProvider gazeProvider;
    private GameObject targetObject;

    void Start()
    {
        gazeProvider = FindObjectOfType<GazeProvider>();
        targetObject = GameObject.Find("TargetObject");
    }

    void Update()
    {
        if (gazeProvider.GazeTarget != null && gazeProvider.GazeTarget == targetObject)
        {
            Debug.Log("Gaze detected on target object.");
        }
    }
}

## 语音识别

HoloLens 2 中的语音识别功能可以让应用程序能够识别用户的语音指令，并根据指令来响应相应的操作。MRTK 提供了一些组件来支持语音识别功能。

### SpeechInputHandler

SpeechInputHandler 是一个 MRTK 组件，它可以将一个物体标记为语音输入的目标。当用户说出相应的语音指令时，可以触发相应的操作。要使用 SpeechInputHandler，需要将它添加到场景中的一个物体上，并设置它的 Keywords（关键词）和 Actions（操作）。

### 示例

以下代码演示了如何在 HoloLens 2 上使用语音识别功能：

using UnityEngine;
using Microsoft.MixedReality.Toolkit.Input;

public class SpeechInputExample : MonoBehaviour, IMixedRealitySpeechHandler
{
    public void OnSpeechKeywordRecognized(SpeechEventData eventData)
    {
        if (eventData.Command.Keyword == "Hello")
        {
            Debug.Log("Hello command recognized.");
        }
    }
}

需要注意的是，在使用语音识别功能之前，需要先在 MRTK 的配置文件中启用语音识别功能，并添加相应的语音指令。