¥89.60 109.00

　　编辑推荐

　　（1）结构清晰。本书共分4个部分：第一部分为基础篇，第二部分为操作组件篇，第三部分为功能技术篇，第四部分为提高篇。紧紧围绕利用MRTK的MR开发，从各个侧面对其功能特性进行了全面的讲述。 （2）循序渐进。本书充分考虑不同知识背景读者的需求，按知识点循序渐进，通过大量配图、实例进行详细讲解，力求使MR初学者能快速掌握使用MRTK进行MR应用开发。 （3）深浅兼顾。在讲解各功能技术点时对其技术原理、理论脉络进行了较深入的探究，用语通俗易懂，对技术阐述深入浅出。 （4）实用性强。本书实例丰富，每各技术点都有案例，注重对技术的实际运用，力图解决读者在项目开发中面临的难点问题，实用性非常强。

　　内容简介

　　本书主要讲述利用Unity和MRTK进行HoloLens2设备上的MR应用开发，对MR应用开发中涉及的技术进行了全方位的讲述，用语通俗易懂，阐述深入浅出。

　　本书共分4个部分：第一部分为基础篇，包括第1章和第2章，本篇从混合现实概念入手，简述HoloLens2设备的技术特性、基本开发步骤及调试部署、MRTK体系架构、配置文件使用等基础知识，立意高屋建瓴，通过对HoloLens2设备和MRTK的介绍，希望读者对在HoloLens2设备上进行MR应用开发有一个初步的印象；第二部分为操作组件篇，包括第3~5章，本篇主要阐述对HoloLens2设备功能特性的基本开发及操作、系统讲解MRTK提供的各类功能组件和UX控件操作使用；第三部分为功能技术篇，包括第6~12章，本篇针对HoloLens2设备上的MR应用开发进行深入全面阐述、剖析讲解，力图从原理到实践，全方位覆盖MR应用开发技术方方面面，每章节都配有详尽的可执行代码及代码的详细说明；第四部分为提高篇，包括第13章和第14章，本篇不仅讨论MR应用与普通应用的区别，也指出在MR应用开发中应该注意的事项，提出了在MR应用开发中应该遵循的基本原则，并对如何排查MR应用性能问题及基本性能优化原则进行了比较深入的探究。

　　本书面向MR应用开发初学者与Unity工程师，也可以作为高校、大专院校相关专业师生的学习用书，以及培训学校的培训教材。

　　作者简介

　　汪祥春，计算机科学与技术专业硕士，全国信标委虚拟现实与增强现实标准工作组成员（CNITSC）、中国增强现实核心技术产业联盟成员（CARA）、华为HDE（Huawei Developer Experts）、CSDN博客专家，申请AR/MR专利3项，拥有深厚的软件工程专业背景和十余年软件项目实施管理经验。著有《基于Unity的ARCore开发实战详细讲解》《AR开发权威指南——AR Foundation》《ARKit原生开发入门精粹——RealityKit+Swift+SwiftUI》。

　　目录

　　基础篇

　　第1章 HoloLens 2基础

　　1.1 混合现实技术概述

　　1.1.1 MR概念

　　1.1.2 全息图

　　5 1.2 HoloLens 2设备

　　1.3 MR技术原理

　　1.3.1 传感器数据

　　1.3.2 前端里程计

　　1.3.3 后端优化

　　1.3.4 回环检测

　　1.3.5 建图

　　1.4 开发环境准备

　　1.4.1 所需硬件和软件

　　1.4.2 软件安装

　　1.4.3 软件配置

　　1.5 MR应用开发初体验

　　1.5.1 创建工程

　　1.5.2 直接导入 MRTK工具包

　　1.5.3 使用 UPM导入 MRTK工具包

　　1.5.4 使用 MRFT导入 MRTK工具包

　　1.5.5 导入 TextMeshPro工具包

　　1.5.6 配置 Unity项目

　　1.5.7 创建和设置场景

　　1.5.8 导出 Unity工程

　　1.5.9 部署到 HoloLens 2设备

　　1.5.10 发布 MR应用

　　1.6 使用模拟器

　　1.7 MRTK输入模拟

　　1.8 设备能力检查

　　第2章 MRTK基础

　　2.1 MRTK概述

　　2.2 MRTK体系架构

　　2.2.1 配置文件

　　2.2.2 运行时

　　2.2.3 服务

　　2.2.4 扩展服务

　　2.2.5 数据提供者

　　2.3 配置文件

　　2.3.1 配置文件概述

　　2.3.2 配置指南

　　操作组件篇

　　第3章 基本特性操作与开发

　　3.1 HoloLens 2设备门户

　　3.1.1 连接设备门户

　　3.1.2 功能简介

　　3.2 研究模式

　　3.3 图像与视频捕获

　　3.3.1 在设备中直接操作

　　3.3.2 在设备门户中操作

　　3.3.3 代码操作

　　3.4 全息远端呈现

　　3.4.1 在 Unity编辑器中使用全息远端呈现

　　3.4.2 MR应用程序使用全息远端呈现

　　3.5 诊断系统

　　3.6 动态 GLTF格式模型加载

　　3.7 多场景管理

　　3.7.1 场景系统配置

　　3.7.2 场景加载与卸载

　　3.7.3 场景加载进度与事件

　　第4章 交互与事件

　　4.1 Bounds Control

　　4.1.1 基本操作

　　4.1.2 HoloLens 2风格

　　4.1.3 事件

　　4.1.4 使用代码操作

　　4.2 Object Manipulator

　　4.2.1 基本操作

　　4.2.2 事件

　　4.3 Constraint Manager

　　4.3.1 基本操作

　　4.3.2 约束组件

　　4.4 Interactable

　　4.4.1 基本操作

　　4.4.2 Interactable 配置节

　　4.4.3 事件

　　4.4.4 视觉主题

　　4.4.5 代码操作

　　4.5 Solvers

　　4.5.1 解算器基础

　　4.5.2 标准解算器

　　4.6 手指手掌可视化

　　4.6.1 Fingertip Visualization

　　4.6.2 RiggedHandVisualizer

　　4.6.3 ArticulatedHandMeshPulse

　　4.7 Elastic System

　　4.8 Dock

　　第5章 UX控件

　　5.1 按钮

　　5.1.1 按钮的使用

　　5.1.2 自定义按钮

　　HoloLens 2开发入门精要——基于 Unity和 MRTK

　　5.2 Slate面板

　　5.3 系统键盘

　　5.4 ToolTips

　　5.5 Sliders

　　5.6 近身菜单

　　5.7 应用程序栏

　　5.8 进度指示器

　　5.9 对话框

　　5.10 手势引导

　　5.10.1 HandInteractionhint组件

　　5.10.2 MoveToTarget组件

　　5.10.3 RotateAroundPoint组件

　　功能技术篇

　　第6章 空间感知和映射

　　6.1 运动跟踪

　　6.2 空间感知

　　6.3 空间感知代码操作

　　6.4 开发环境中测试空间感知

　　6.5 射线检测

　　6.6 场景理解和语义

　　6.6.1 场景理解基础

　　6.6.2 场景理解使用

　　6.7 空间感知和场景理解的应用

　　6.7.1 虚拟物体放置

　　6.7.2 遮挡

　　6.7.3 物理模拟

　　6.7.4 导航和路径规划

　　第7章 手势操作与交互

　　7.1 手势输入配置

　　7.1.1 输入数据提供者

　　7.1.2 手部跟踪

　　7.1.3 手部指针

　　7.2 指针概述

　　7.3 指针基本操作

　　7.4 手势操作

　　7.4.1 近端操作

　　7.4.2 远端操作

　　7.5 手部跟踪

　　7.5.1 获取手部姿态

　　7.5.2 获取手部关节

　　7.5.3 获取手部网格

　　7.5.4 手部关节使用演示

　　7.6 手势录制和回放

　　7.6.1 手势录制

　　7.6.2 手势回放

　　7.7 手部菜单

　　第8章 语音与交互

　　8.1 语音命令

　　8.1.1 打开话筒功能特性

　　8.1.2 设置语音命令关键词

　　8.1.3 监听并处理事件

　　8.1.4 自定义语音命令处理逻辑

　　8.2 语音识别

　　8.2.1 添加语音识别数据提供者

　　8.2.2 监听并处理事件

　　8.2.3 自定义语音命令处理

　　第9章 眼动跟踪与凝视交互

　　9.1 眼动校准

　　9.2 眼动跟踪配置

　　9.2.1 启用凝视输入功能特性

　　9.2.2 添加凝视数据提供者

　　9.2.3 设置眼动跟踪参数

　　9.3 凝视功能使用

　　9.4 获取凝视数据

　　HoloLens 2开发入门精要——基于 Unity和 MRTK

　　第10章 光影与特效

　　10.1 光照

　　10.1.1 光源

　　10.1.2 光与材质的交互

　　10.1.3 光照模型

　　10.1.4 悬浮灯光

　　10.1.5 接近灯光

　　10.2 MRTK标准着色器

　　10.2.1 模型切割

　　10.2.2 轮廓线

　　10.2.3 挤出与模板测试

　　10.3 环境反射

　　10.3.1 立方体贴图

　　10.3.2 环境反射与光照

　　前言/序言

　　PREFACE

　　HoloLens 2设备从 HoloLens 1代发展而来，是一台可穿戴的一体式全息计算设备，它具有目前业内最好的光波导显示组件，拥有独立的计算单元，可进行实时手势检测、语音命令、空间感知、运动跟踪、眼动跟踪等解算。 HoloLens 2设备发布后，在工业和军事领域取得了巨大成功，也成为 AR眼镜中名副其实的佼佼者。在计算机视觉与人工智能技术的推动下， HoloLens 2设备无论是跟踪精度、设备性能，还是人机交互自然性上都有了很大提高，已基本满足大众对 AR眼镜的期望。据权威机构预测， AR/MR会成为下一个十年改变人们生活、工作最重要的技术之一，并在 5G通信技术的助力下出现应用高潮。

　　HoloLens 2设备是微软公司在前沿科技领域的重大技术布局，引领着移动 AR眼镜的发展方向，并且围绕 HoloLens 2设备上的 MR应用，微软公司构建了一系列软硬件生态，包括 Azure云服务、 Microsoft Mesh等，正全力推动 MR技术在各行各业、工作生活的各个角落落地应用，一个崭新的人机交互设备正在悄然改变着一切。

　　本书主要讲述利用 Unity和 MRTK进行 HoloLens 2设备上的 MR应用开发，旨在为 MR技术开发人员提供一份相对完善、成体系的学习材料，帮助开发者系统性地掌握 MR开发的相关知识，建立 MR应用开发知识体系。

　　AR/MR技术是一种将虚拟信息与真实世界融合展示的技术，其广泛运用了人工智能、三维建模、实时跟踪注册、虚实融合、智能交互、传感计算等多种技术手段，将计算机生成的文字、图像、三维模型、声频、视频、动画等虚拟信息模拟仿真后应用到真实世界中。 AR技术同时考虑了真实世界与虚拟信息的相互关系，虚实信息互为补充，从而实现对真实世界的增强，并能实时虚实交互。

　　本书注重利用 MRTK进行 MR应用开发的实际应用，但在讲解技术点的同时对其原理、技术背景进行了较深入的探究，采取循序渐进的方式，使读者知其然更能知其所以然，一步一步地将读者带入 MR应用开发的殿堂。

　　前置知识

　　本书面向 MR应用开发初学者与 Unity工程师，内容讲述尽量采用通俗易懂的语言，从基础入门，但仍然希望读者能具备以下前置知识。

　　（1）熟悉 Unity引擎的使用操作，掌握 Unity开发的基本技能，能熟练进行一般性的模型导入和导出、属性设置、发布部署等。

　　（2）熟悉 C#高级语言，掌握基本的 C#语法及常见数据结构、编码技巧，对常见游戏对

　　HoloLens 2开发入门精要——基于 Unity和 MRTK

　　象的代码操作、事件绑定等有一定的理解。

　　（3）了解 Visual Studio开发环境，能进行基本的开发环境设置、功能调试、资源使用等。

　　（4）了解图形学。数字三维空间是用数学精确描述的虚拟世界，如果读者对坐标系、向量及基本的代数运算有所了解，会对理解 MR应用的工作原理、渲染管线有很大帮助，但本书中没有直接应用到复杂的数学计算，读者不用太担心。

　　预期读者

　　本书属于技术类书籍，预期读者人群包括：（1）高等学校及对计算机技术有浓厚兴趣的专科学校的学生。（2）对 MR技术有兴趣的科技工作者。（3）向 MR转行的程序员。（4）研究讲授 MR技术的教师。（5）HoloLens 2设备应用开发人员。

　　本书特色

　　（1）结构清晰。本书共分 4部分：第一部分为基础篇，第二部分为操作组件篇，第三部分为功能技术篇，第四部分为提高篇。紧紧围绕利用 MRTK的 MR开发，从各个侧面对其功能特性进行全面讲述。

　　（2）循序渐进。本书充分考虑不同知识背景读者的需求，按知识点循序渐进，通过大量配图、实例进行详细讲解，力求使 MR初学者能快速掌握使用 MRTK进行 MR应用开发。

　　（3）深浅兼顾。在讲解各功能技术点时对其技术原理、理论脉络进行了较深入的探究，语言通俗易懂，对技术阐述深入浅出。

　　（4）实用性强。本书实例丰富，每个技术点都配有实例，注重对技术的实际运用，力图解决读者在项目开发中面临的难点问题，实用性非常强。

　　读者反馈

　　尽管我们在本书的编写过程中多次对内容、语言描述的连贯性和叙述的准确性进行了审查、校正，但由于作者能力和水平有限，书中难免会出现一些错误，欢迎读者在发现这些问题的时候及时批评指正。

　　致谢

　　仅以此书献给笔者的妻子欧阳女士、孩子妍妍及轩轩，是你们的支持让笔者能勇往直前，永远爱你们，也感谢赵佳霓编辑对本书的大力支持。

　　汪祥春

　　2021年 8月

　　本书源代码