《Rokid 的AR 實踐與空間計算之旅》是一部全面呈現(xiàn)空間計算技術(shù)發(fā)展、應用與未來趨勢的指南,標志著Rokid 十年創(chuàng)業(yè)的重要節(jié)點。本書不僅回顧了過去的技術(shù)積累,還展望了未來技術(shù)的發(fā)展趨勢。隨著行業(yè)的發(fā)展,本書所涵蓋的內(nèi)容將不斷進步、迭代。本書探討了空間計算的理論與實踐,介紹了其概念演變、主要形態(tài)及發(fā)展歷程,深入解析了空間計算的核心技術(shù)原理,為讀者提供了空間計算的基礎框架,幫助他們更好地掌握空間計算的技術(shù)核心。同時,本書專注于空間計算平臺的核心組成,涵蓋了顯示屏幕、光學、芯片、傳感器和電池等元器件,并以Apple Vision Pro 和Rokid AR Studio 為例,介紹了設備和技術(shù)的最新進展,并且詳細介紹了YodaOS-XR 空間計算操作系統(tǒng),重點說明其在交互算法、用戶體驗和開發(fā)工具鏈方面的優(yōu)勢。此外,本書通過實際案例展示了空間計算的應用領(lǐng)域(如智能制造、石油、發(fā)電、醫(yī)療、文旅和商業(yè)等),聚焦空間計算技術(shù)的未來發(fā)展與趨勢,展望了可能的新興應用場景。本書面向技術(shù)開發(fā)者、藝術(shù)設計師、產(chǎn)品策劃者及行業(yè)合作伙伴等,旨在為讀者提供一定的參考,帶來一些啟示,助力讀者在空間計算領(lǐng)域探索、創(chuàng)新。
Rokid技術(shù)團隊致力于機器人領(lǐng)域研究、追求極致工藝和用戶體驗、堅持創(chuàng)新原則。
目錄
第1章 空間計算的概念與發(fā)展歷程 1
1.1 空間計算的概念演變 2
1.2 空間計算技術(shù)的主要形態(tài) 4
1.2.1 虛擬現(xiàn)實 5
1.2.2 增強現(xiàn)實 6
1.2.3 混合現(xiàn)實 7
1.3 空間計算技術(shù)發(fā)展的新方向 8
1.3.1 視頻透視 8
1.3.2 光學透視 9
1.3.3 VST技術(shù)和OST技術(shù)的優(yōu)勢與限制 10
第2章 空間計算的核心技術(shù) 12
2.1 空間計算設備 12
2.2 空間計算的技術(shù)特點與核心能力 14
2.2.1 虛實結(jié)合體驗 15
2.2.2 多模態(tài)感知交互 15
2.2.3 空間感知能力 16
2.2.4 空間計算理解能力 17
2.2.5 空間計算交互能力 19
2.2.6 空間計算協(xié)同能力 21
2.2.7 空間計算展現(xiàn)能力 22
2.2.8 數(shù)字內(nèi)容創(chuàng)作 23
2.3 空間計算的關(guān)鍵支撐技術(shù) 24
2.3.1 人工智能 24
2.3.2 5G無線網(wǎng)絡 26
2.3.3 云服務 27
2.3.4 隱私計算 28
2.3.5 終端芯片技術(shù) 29
2.4 空間計算平臺 30
2.4.1 空間計算操作系統(tǒng) 30
2.4.2 兼容國際開放標準 34
2.5 空間計算技術(shù)的未來展望 35
第3章 核心元器件 37
3.1 顯示屏幕 37
3.1.1 液晶顯示技術(shù) 37
3.1.2 有機發(fā)光二極管技術(shù) 38
3.1.3 微型顯示器技術(shù) 38
3.1.4 激光束掃描技術(shù) 39
3.1.5 量子點技術(shù) 40
3.1.6 發(fā)展趨勢與挑戰(zhàn) 41
3.2 光學 41
3.2.1 Pancake光學技術(shù) 42
3.2.2 Birdbath光學技術(shù) 44
3.2.3 光波導技術(shù) 46
3.3 芯片 48
3.3.1 核心計算芯片 48
3.3.2 無線通信能力 52
3.3.3 手柄設備核心計算芯片 53
3.3.4 其他芯片 53
3.3.5 芯片制造 53
3.4 傳感器 54
3.4.1 圖像傳感器 54
3.4.2 慣性測量單元 57
3.5 電池 60
3.5.1 電池技術(shù)的發(fā)展現(xiàn)狀 60
3.5.2 當前的技術(shù)趨勢 61
3.5.3 電池技術(shù)在AR設備和空間計算設備中的應用 61
3.5.4 挑戰(zhàn)與未來展望 62
第4章 空間計算設備 63
4.1 Apple Vision Pro 63
4.1.1 Apple Vision Pro的定義 64
4.1.2 Apple Vision Pro的產(chǎn)品參數(shù) 68
4.1.3 Apple Vision Pro的核心特點 69
4.2 Rokid AR Studio 70
4.2.1 Rokid AR Studio的定義 71
4.2.2 Rokid AR Studio的產(chǎn)品參數(shù) 74
4.2.3 Rokid AR Studio的核心特點 74
4.3 總結(jié) 75
第5章 空間計算操作系統(tǒng) 77
5.1 需要空間計算操作系統(tǒng)的原因 77
5.2 YodaOS-Master空間計算操作系統(tǒng)的概述 80
5.3 YodaOS-Master空間計算操作系統(tǒng)的特點 82
5.3.1 實時空間計算能力 82
5.3.2 多模態(tài)交互能力 83
5.3.3 自研操作系統(tǒng)能力 85
5.3.4 混合應用框架 86
5.4 基于 YodaOS-Master 開發(fā)空間計算應用 87
5.4.1 軟件設計與開發(fā)過程 87
5.4.2 產(chǎn)品用戶體驗與優(yōu)化 111
5.4.3 Rokid開發(fā)者工具包 136
第6章 生態(tài)內(nèi)容 154
6.1 開發(fā)者支持與創(chuàng)新 154
6.1.1 資源提供 155
6.1.2 社區(qū)與支持 157
6.1.3 培訓與教育 159
6.1.4 開發(fā)者活動 161
6.2 合作伙伴網(wǎng)絡 166
6.2.1 戰(zhàn)略合作 167
6.2.2 商業(yè)化合作 168
6.2.3 成功案例 168
6.3 消費者互動 169
6.3.1 應用商店簡介 169
6.3.2 應用商店發(fā)展簡史 169
6.3.3 應用商店模式的主要特點 170
6.3.4 應用的主要付費模式 172
6.3.5 應用商店與開放平臺 173
6.3.6 XR時代的應用生態(tài) 174
第7章 空間計算時代的各行各業(yè) 178
7.1 空間計算技術(shù)在智能制造行業(yè)的典型應用 178
7.1.1 設備巡檢 179
7.1.2 空間計算應用設備維修 180
7.1.3 遠程驗收/出廠檢驗/遠程建造 180
7.1.4 賦能遠程售后 181
7.1.5 應用輔助質(zhì)檢 182
7.1.6 輔助裝配 183
7.1.7 安全監(jiān)管 183
7.1.8 物流分揀 184
7.1.9 工作培訓 184
7.1.10 企業(yè)展廳 185
7.1.11 工廠漫游 186
7.2 空間計算技術(shù)在石油化工行業(yè)的典型應用 187
7.2.1 空間計算輔助巡回檢查 188
7.2.2 空間計算賦能檢修作業(yè) 189
7.2.3 空間計算守護企業(yè)安全 190
7.2.4 空間計算助力員工培訓 191
7.2.5 空間計算切實解決企業(yè)痛點 192
7.3 空間計算技術(shù)在電力行業(yè)的典型應用 193
7.3.1 空間計算技術(shù)在核電行業(yè)的應用場景 195
7.3.2 空間計算技術(shù)在火電行業(yè)的應用場景 199
7.3.3 空間計算技術(shù)在水電行業(yè)的應用場景 201
7.3.4 空間計算技術(shù)在風電行業(yè)的應用場景 202
7.3.5 空間計算技術(shù)在電網(wǎng)行業(yè)的應用場景 204
7.4 空間計算技術(shù)在醫(yī)學中的典型應用 205
7.4.1 空間計算技術(shù)重塑醫(yī)療模擬教學新維度 205
7.4.2 空間計算技術(shù)創(chuàng)造醫(yī)療急救領(lǐng)域新紀元 207
7.4.3 空間計算技術(shù)打造醫(yī)療手術(shù)智能輔助新視角 208
7.4.4 空間計算技術(shù)構(gòu)建醫(yī)學治療保健新手段 210
7.5 空間計算技術(shù)在文化旅游領(lǐng)域的實踐 212
7.5.1 博物館中的AR空間計算技術(shù) 213
7.5.2 旅游景區(qū)中的AR空間計算技術(shù) 218
7.5.3 展望與挑戰(zhàn) 221
7.6 AR空間互動娛樂的開端 223
7.6.1 商業(yè)新勢力入局 223
7.6.2 用AR傳播快樂 225
7.6.3 新企劃啟動 228
7.6.4 AR互娛的展望 229
第8章 空間計算技術(shù)發(fā)展趨勢 230
8.1 統(tǒng)一渲染 230
8.2 空間拍攝與新的空間內(nèi)容標準 232
8.3 生成式AI浪潮下的3D內(nèi)容制作 233
8.4 空間計算專用芯片 236
8.5 新的人機交互方式 238
第9章 未來應用場景展望 240
9.1 空間計算場景落地的技術(shù)支持 240
9.1.1 云計算 240
9.1.2 5G網(wǎng)絡 241
9.1.3 人工智能 242
9.1.4 物聯(lián)網(wǎng) 242
9.2 空間計算應用場景的展望 243
9.2.1 教育培訓 243
9.2.2 醫(yī)療 244
9.2.3 工業(yè)制造 245
9.2.4 電子商務 246
9.2.5 游戲和娛樂 247
9.2.6 房地產(chǎn) 248
9.2.7 交通和物流 249
9.2.8 文旅展陳 250
9.2.9 社交和通信 251
拓展閱讀:專家說 252