下一代空间计算：AR与VR创新理论与实践电子书

内容简介

O'Reilly Media，Inc.介绍

序言

前言

第1部分 跨越数字和现实的设计与艺术

第1章 人类与计算机的交互

常用术语

概述

历代的人机交互模态：20世纪之前

历代的人机交互模态：第二次世界大战期间

历代的人机交互模态：第二次世界大战之后

历代的人机交互模态：个人计算机崛起的时代

历代的人机交互模态：计算机微型化的时代

为何要回顾这些历史

常见的HCI模式

新的人机交互模态

空间计算设备的人机交互模态现状

沉浸式计算系统当前所用的控制器

身体追踪技术

关于手追踪和手势识别的注记

下一代语音输入、手势输入和硬件输入

第2章 为感官而设计，不要为设备而设计

展望未来

感知技术概览

我们为谁打造这样的未来

女性在AI中扮演的角色

感官设计

感官设计概述

五项感官设计原则

1．直觉体验是多感官的

2．3D将会触手可及

3．设计要自然而符合物理原理

4．设计无法完全可控

5．释放空间协作的力量

Adobe的AR故事

结语

第2部分 扩展现实如何改变数字艺术

第3章 VR艺术

一种更自然的3D艺术创作方式

VR动画

第4章 3D艺术优化

概述

建议

理想的解决方案

拓扑结构

烘焙

绘制调用

使用VR工具进行3D艺术创作

使用现成的3D模型与重新制作

结语

第3部分 硬件、SLAM、追踪

第5章 计算机视觉如何让AR成为可能

我们是谁

AR简史

为何及如何选择AR平台

作为开发者，我应该选择哪个平台，为何要如此选择

AR效果具有不确定性

软硬件集成

光学校准

惯性校准

追踪技术的未来展望

AR计算机视觉技术的未来展望

地图

多人AR的工作原理

最具挑战性的部分

重定位的工作原理

AR中重定位的研究现状

重定位问题会有消费级的解决方案吗

难道谷歌公司或苹果公司无法给出消费级的解决方案吗

重定位不等于多人AR

当前App的重定位实际是怎么做的

AR平台

苹果的ARKit

解密一些谜团

ARCore是不是轻量级的Tango

应该开始基于ARCore构建AR应用吗

Tango、HoloLens、Vuforia及其他AR平台

其他开发建议

光照

多人AR——到底难在何处

用户通过AR进行社交活动

AR应用如何连接现实世界并确定自身位置

AR应用如何理解现实世界的事物并与之连接

AR云

我所想象的AR云

AR云有多重要

AR云到底是什么

为什么媒体对ARKit和ARCore“不感冒”

构建出色的AR应用还缺少什么

今天的移动云能否胜任这项工作

离开AR云，ARKit/ARCore是否毫无用处

AR云的黎明

更大的图景——隐私数据和AR云数据

术语表

第4部分 创建跨平台的VR/AR应用

第6章 VR/AR跨平台方法论

为什么需要跨平台

游戏引擎的作用

理解3D图形

虚拟相机

自由度

游戏设计的可移植性教程

简化控制器的输入

开发步骤1：设计基本界面

开发步骤2：平台集成

总结

第7章 VRTK：社区开源框架

什么是VRTK，为什么大家会使用VRTK

VRTK的历史

SteamVR Unity Toolkit的诞生

VRTK v4

VRTK的未来

VRTK的成功

开始使用VRTK v4

第8章 三项VR/AR最佳开发实践

VR/AR开发的难度大

处理移动

VR中的移动机制

AR中的移动机制

有效地利用音效

VR中的音效

AR中的音效

常见的交互范式

VR背包系统

AR射线检测

结语

第5部分 增强数据表示：空间计算中的数据可视化与人工智能

第9章 数据与机器学习可视化在空间计算中的开发与设计

概述

理解数据的可视化

空间计算中数据与机器学习的可视化法则

为什么数据与机器学习的可视化能在空间计算中发挥作用

数据可视化设计随着XR的出现而发展

在XR中呈现2D数据与3D数据

空间计算中的2D数据可视化与3D数据可视化的比较

空间计算中的数据可视化交互

动画

失败的数据可视化设计

良好的数据可视化设计能够优化3D空间

“节省时间感觉就像一切变得简单了”

数据表示、信息图表与交互

什么是数据可视化

数据可视化与大数据或机器学习可视化之间的区别

如何创建数据可视化：数据可视化的构建流程

WebXR：在Web端构建数据可视化

数据可视化在XR中遭遇的挑战

数据可视化的行业案例

3D重建与直接操作真实数据：XR中的解剖结构

近距离了解Glass Brain

TVA Surg医学成像VR模块

人人都能做数据可视化：XR中的开源数据可视化

生物大分子数据的可视化

实践教程：如何在空间计算中创建数据可视化

如何创建数据可视化：资源

结语

参考资料

资源

数据可视化工具

机器学习可视化工具

数据新闻的可视化

术语表

第10章 AI角色与行为

概述

行为

现状：响应式AI

适应性

复杂性与普遍性

可行性

赋予系统更高的智能：慎思式AI

机器学习

强化学习

深度强化学习

模仿学习

自动规划与机器学习相结合

应用

结语

参考资料

第6部分 体验现实的应用案例

第11章 VR与AR医疗保健生态系统

VR/AR医疗保健技术应用设计

标准用户体验并不直观

布置安定的环境

便利性

指导案例：帕金森综合征项目Insight

Insight的做法

Insight的构建

企业

医疗规划与指导

与医疗教育相关的体验

与患者相关的体验

主动式医疗保健

前沿学术机构的研究案例

第12章 体育爱好者的XR体验

概述

第一个板块：体育AR与VR的五大关键法则

没有绝对的实时

第二个板块：体育领域产品体验的进一步发展

第三个板块：打造未来

所有权

忠告

结语

第13章 VR企业培训案例

概述：企业培训的重要性

VR培训有用吗

案例：洪水屋培训

VR培训适合什么场景？“RIDE”准则

什么是良好的VR培训

3D全景视频

3D全景视频的优势

3D全景视频面临的挑战

3D全景视频的交互

案例：工厂车间培训

叙事的重要性

案例：商店反抢劫应急培训

XR培训的未来：超越3D全景视频

计算机图形

案例：职场软技能培训

展望：摄影测量技术

展望：光场

展望：AR培训

展望：语音识别

展望：最理想的培训体验

参考资料

后记

关于作者

关于封面