Unity HoloLens2 开发笔记(五):语音输入事件(可自定义)

时间:2024-03-16 13:29:40

语音输入提供程序(如Windows语音输入)不会创建任何控制器,而是允许您定义在识别时将引发语音输入事件的关键字。该语音命令配置文件中输入系统配置文件可以在其中配置识别关键字。对于每个命令,您还可以:

  • 选择一个输入动作以将其映射到。例如,通过这种方式,您可以将关键字“ 选择”映射到相同的动作,从而具有与鼠标左键单击相同的效果。
  • 指定一个按键代码,按下该按键将产生相同的语音事件。
  • 添加将在UWP应用中使用的本地化**,以从应用资源中获取本地化的关键字。

1.新建工程,导入MRTK

2.适配场景 状态栏——Mixed Reality Toolkit——Add to Scene and ConfigureUnity HoloLens2 开发笔记(五):语音输入事件(可自定义)

 

3.找到MixedRealityToolkit——Input——Speech——Speech Commands

注:期间遇到无法编辑的情况直接右侧Clone HoloLens2的配置,可能要多次CloneUnity HoloLens2 开发笔记(五):语音输入事件(可自定义)

 

4.Add a New Speech Command——添加两个指令:显示物体、隐藏物体Unity HoloLens2 开发笔记(五):语音输入事件(可自定义)

 

Keyword:自定义输入指令 如:放大物体,Enlarge the GameObject 中英文都可以,个人建议不要太花哨,简易识别的那种,毕竟这不是AI人工智能识别。

LocalizationKey:添加将在UWP应用中使用的本地化**,以从应用资源中获取本地化的关键字。

KeyCode:按下该按键将产生相同的语音事件。

Action:内置了一些操作,如需自定义可先选择None。

5.创建一个空GameObject,Postion:0,-2,8

6.在GameObject下创建一个Plane和Cube,Plane的Postion:0,0,0 ,Cube的Postion:0,2,0(这些都不重要,可以自己调整)Unity HoloLens2 开发笔记(五):语音输入事件(可自定义)

 

7.在GameObject上添加脚本SpeechInputHandler,找到Speech Confurmation Tooltip Prefab,选择路径下的Assets/MRTK/SDK/Features/UX/Prefabs/Tooltips/SpeechConfirmationTooltip

8.点击下面的+号 添加刚刚定义的指令,把Cube拖进去,选择GameObject.SetActiveUnity HoloLens2 开发笔记(五):语音输入事件(可自定义)

 

9.打包发布测试