Rokid發(fā)力空間計(jì)算，新一代人機(jī)交互產(chǎn)品Rokid AR Studio亮相

8月26日，2023 Rokid Jungle發(fā)布會(huì)在杭州未來科技城國(guó)際會(huì)議中心召開。會(huì)上，Rokid率先發(fā)布了消費(fèi)級(jí)OST（Optical See Through）個(gè)人空間計(jì)算平臺(tái)Rokid AR Studio。

Rokid創(chuàng)始人、CEO祝銘明在發(fā)布會(huì)上表示：“我們希望帶給用戶體驗(yàn)更極致、更輕便的空間計(jì)算產(chǎn)品，讓空間計(jì)算能更自然地融入日常生活和工作，讓Rokid AR Studio成為你的第一臺(tái)空間計(jì)算機(jī)。”

76g重量 1個(gè)攝像頭，以克為單位的技術(shù)精進(jìn)

Rokid AR Studio延續(xù)Rokid分體式設(shè)計(jì)思路，由AR空間計(jì)算眼鏡Rokid Max?Pro和AR空間計(jì)算主機(jī)?Rokid?Station?Pro組成。

在硬件設(shè)計(jì)方面，Rokid Max?Pro機(jī)身僅重76g。與今年3月發(fā)布的Rokid Max相比，Rokid Max Pro僅在雙目中間多了一個(gè)攝像頭，機(jī)身重量?jī)H增加1g，卻具備了“以手勢(shì)交互為核心的空間計(jì)算能力”，可實(shí)現(xiàn)SLAM、微手勢(shì)交互、第一視角分享、視覺定位VPS能力。帶領(lǐng)AR行業(yè)進(jìn)入軟件和生態(tài)建設(shè)的第二階段。

視覺方面，延續(xù)了Rokid Max的驚艷表現(xiàn)。采用全新的BirdBath模組，F(xiàn)OV達(dá)到50度，相當(dāng)于6米外215英寸超高清大屏的效果。同時(shí)，Rokid Max Pro搭配索尼半導(dǎo)體科技Micro OLED屏幕，入眼亮度最高可達(dá)600nit，屏幕分辨率為1920×1200，最高支持120Hz刷新率，能夠給到消費(fèi)者一流的色彩表現(xiàn)、清晰度和對(duì)比度。

擁有如此強(qiáng)大的空間算力，卻只有輕便的76g機(jī)身，這要?dú)w功于強(qiáng)大的空間計(jì)算主機(jī)Rokid Station Pro。該主機(jī)采用高通全新擴(kuò)展現(xiàn)實(shí)平臺(tái)第一代驍龍XR2+，相較于驍龍XR2平臺(tái)，可以帶來30%的散熱性能提升和50%的續(xù)航能力提升。

搭載驍龍XR2+、12G RAM + 128G ROM, 支持WIFI6和BT5.1，Station Pro續(xù)航能力將是手機(jī)方案的2倍以上，同時(shí)具有更佳的散熱和更高性能，可以達(dá)到厘米級(jí)6DoF跟蹤精度和極低MTP渲染延遲。

微手勢(shì) ?真AR ?引領(lǐng)OST方向的AR進(jìn)化路徑

相較之前的AR產(chǎn)品，Rokid?AR Studio在人機(jī)交互方面具有突破性進(jìn)展。

從交互方式上來看，不依賴手柄或遙控器，只用眼睛、手勢(shì)和聲音，就能實(shí)現(xiàn)實(shí)時(shí)操控。其中，手勢(shì)將成為最常用的交互方式：手指一捏，即可進(jìn)行點(diǎn)擊和選中；左右撥動(dòng)，可對(duì)正在瀏覽的界面或內(nèi)容進(jìn)行切換。空間世界，一“觸”即發(fā)。在特定使用場(chǎng)景下，還能通過抬腕、捏拳、拖拽等進(jìn)行操控。

從信息呈現(xiàn)來看，展現(xiàn)方式、邏輯和過去大不相同。信息流實(shí)現(xiàn)從網(wǎng)頁(yè)平鋪、手機(jī)信息流到空間展示的革命：信息顯示的物理局限被打破，無論在哪里，每一寸空間都可以成為你的屏幕。Rokid Max?Pro同時(shí)具有空間多屏與空間巨幕兩種展現(xiàn)方式，讓信息展現(xiàn)的界面有了無限的伸縮彈性?？臻g多屏可以同時(shí)開啟多個(gè)窗口，并列排布；顯示界面均帶有空間定位功能，輕微轉(zhuǎn)頭，信息一覽無余；行業(yè)首創(chuàng)超大巨幕，比例可達(dá)32:9，信息呈現(xiàn)不在受限于屏幕尺寸。

此外，不同使用場(chǎng)景下空間交互的體驗(yàn)也會(huì)有所不同。目前，AR領(lǐng)域的三大主流場(chǎng)景分別為影音、辦公與游戲。

影音場(chǎng)景下，空間聲場(chǎng)帶來更立體、聲動(dòng)、身臨其境般的音效體驗(yàn)，3D影像效果更是讓畫面精準(zhǔn)呈現(xiàn)出栩栩如生的多角度立體效果；辦公場(chǎng)景下，脫離物理局限的空間展示，滿足差旅、戶外、居家、外出等多樣使用需求，同時(shí)多任務(wù)處理與手勢(shì)靈活切換令工作效率倍增；游戲場(chǎng)景下，沉浸式體驗(yàn)的同時(shí)更具挑戰(zhàn)性和趣味性。例如在一些游戲中，玩家需要通過手勢(shì)交互來控制游戲中的角色進(jìn)行戰(zhàn)斗，而在另一些游戲中，玩家需要通過空間定位來躲避障礙物或攻擊敵人。

YodaOS-Master操作系統(tǒng)發(fā)布

引領(lǐng)行業(yè)進(jìn)入軟件和生態(tài)建設(shè)2.0時(shí)代

Rokid Station Pro搭載的全空間化AR操作系統(tǒng)YodaOS-Master，是物理世界和數(shù)字世界的連接者：通過攝像頭捕捉和基于分區(qū)的ATW/PTW 低延遲渲染，單目SLAM可實(shí)現(xiàn)厘米級(jí)精度，精準(zhǔn)感知物理空間；依靠?jī)?yōu)化算法和XR2+的硬件加速，利用高精度的實(shí)時(shí)圖像傳感器對(duì)3D手勢(shì)進(jìn)行高精準(zhǔn)的位置捕捉，同時(shí)通過低算法延遲滿足手勢(shì)追蹤的實(shí)時(shí)性要求，完成3D手勢(shì)交互。

為了實(shí)現(xiàn)最好的XR體驗(yàn)，YodaOS-Master從芯片優(yōu)化、硬件設(shè)計(jì)、軟件架構(gòu)、AR算法還有創(chuàng)作工具等諸多方面都做了巨大升級(jí)，基于單目攝像頭的空間算法能力達(dá)到了業(yè)界領(lǐng)先水平，或是目前最為完整的一套面向空間計(jì)算時(shí)代的AR空間操作系統(tǒng)。

圍繞空間感知、空間理解、空間渲染和空間交互展開設(shè)計(jì)，YodaOS-Master通過從底層到頂層的系統(tǒng)設(shè)計(jì)優(yōu)化，為用戶帶來前所未有空間體驗(yàn)的同時(shí)，也為開發(fā)者提供了從硬件、基礎(chǔ)層、平臺(tái)層直至應(yīng)用層的全鏈路服務(wù)。

Rokid AR開放平臺(tái)（ar.rokid.com）全新升級(jí)為UXR SDK 2.0。

Rokid UXR?2.0 開放SDK，支持0/3/6 DoF空間模式的選擇，以及手勢(shì)、射線、鍵鼠、語(yǔ)音等多模態(tài)交互方式，滿足多樣化的應(yīng)用開發(fā)需求；算法原子化，讓App可以在系統(tǒng)升級(jí)中自然獲得性能的提升，減少開發(fā)者負(fù)擔(dān)；具備系統(tǒng)性能監(jiān)測(cè)工具和調(diào)試模式，便于開發(fā)者隨時(shí)了解運(yùn)行狀態(tài)；對(duì)Rokid跨代設(shè)備實(shí)現(xiàn)兼容。

UXR SDK 2.0支持Unity等OpenXR標(biāo)準(zhǔn)的主流引擎，以及MRTK接口，開發(fā)者可以輕松開發(fā)移植。目前，Rokid Station Pro里搭載的AR實(shí)驗(yàn)室，大部分作品都是開發(fā)者在基于Unity引擎進(jìn)行創(chuàng)作的。

在Master系統(tǒng)里，Rokid還內(nèi)置了自研JSAR引擎和小組件容器，JS開發(fā)者可以輕松上傳自己的組件。JSAR支持多平臺(tái)，讓開發(fā)更簡(jiǎn)單、運(yùn)行更安全；新增快應(yīng)用生態(tài)類型，不需下載安裝，點(diǎn)擊即可快速產(chǎn)出很多短小有趣的快應(yīng)用。

此外，Rokid還設(shè)立了AR專項(xiàng)開發(fā)者基金、發(fā)現(xiàn)、扶持優(yōu)秀的AR開發(fā)團(tuán)隊(duì)，邀請(qǐng)開發(fā)者加入，打造豐富的AR應(yīng)用生態(tài)。

由龐大生態(tài)共同構(gòu)建的平臺(tái)才能催生應(yīng)用的繁榮。依賴Rokid AR Studio，Rokid與開發(fā)者將共同參與、共同推動(dòng)AR行業(yè)的創(chuàng)新與發(fā)展，讓AR改造現(xiàn)實(shí)世界，讓AR成為人們?nèi)粘Ｉ畹囊徊糠帧?/p>

攜手Unity3D引擎 共創(chuàng)開放兼容的XR繁榮生態(tài)

為了讓用戶享受空間計(jì)算帶來的真AR體驗(yàn)，Rokid攜手Unity引擎打造了支持6DoF與手勢(shì)操作的首批生態(tài)內(nèi)容。YodaOS-Master為空間交互而生，與Unity?3D應(yīng)用天然契合。

作為被最廣泛使用的實(shí)時(shí)3D引擎，Unity集高質(zhì)量、輕量化與跨平臺(tái)兼容性于一身，構(gòu)建了支持各種XR硬件的新XR架構(gòu)，使得創(chuàng)作者們可以高效地創(chuàng)建高質(zhì)量的游戲與應(yīng)用。Unity中國(guó)XR產(chǎn)品技術(shù)總監(jiān)李鵬鵬在本次發(fā)布會(huì)上表示，將與Rokid共創(chuàng)XR繁榮生態(tài)。

Rokid?Station?Pro搭載的首批空間3D生態(tài)內(nèi)容中，移動(dòng)云VR、指尖戰(zhàn)爭(zhēng)、上帝之手、飛鏢大賽等應(yīng)用和游戲，即是基于Unity進(jìn)行開發(fā)。例如，咪咕視訊為Rokid打造的移動(dòng)云VR定制版，為Rokid用戶提供歐洲足球五大聯(lián)賽、CBA、UFC、WTT的全量賽事賽程推薦；飛鏢大賽將3D手勢(shì)交互與重力感應(yīng)結(jié)合，根據(jù)專業(yè)飛鏢比賽機(jī)制制定玩法與規(guī)則，讓體驗(yàn)更沉浸、更真實(shí)。

同時(shí)，Rokid?Station?Pro也兼容安卓2D生態(tài)。Rokid?Station上廣受用戶歡迎的安卓應(yīng)用，如愛奇藝、騰訊視頻、嗶哩嗶哩、優(yōu)酷、芒果TV、影牛牛、隨樂游、無影云電腦等都能在Rokid?Station?Pro進(jìn)行使用。其中，無影云電腦為適配3D生態(tài)特別定制了空間大屏。其他手機(jī)、PAD等移動(dòng)終端的眾多2D安卓應(yīng)用也可在其中使用。

多元化展陳?創(chuàng)新智能看車 空間交互下的生產(chǎn)力變革

人類從器械時(shí)代到工業(yè)時(shí)代再到計(jì)算機(jī)時(shí)代，生產(chǎn)工具的進(jìn)化讓生產(chǎn)力實(shí)現(xiàn)了飛躍。作為繼個(gè)人計(jì)算時(shí)代與移動(dòng)計(jì)算時(shí)代后的下一個(gè)發(fā)展方向，空間計(jì)算打破空間物理限制，帶來新的交互方式，必將引起生產(chǎn)工具與生產(chǎn)力的新變革。

目前，Rokid?空間計(jì)算已經(jīng)在展陳、教育教學(xué)、文旅、工業(yè)、汽車等多個(gè)板塊得到了廣泛應(yīng)用，和展示的文物進(jìn)行互動(dòng)、令抽象的知識(shí)躍然眼前，對(duì)消失的遺址進(jìn)行復(fù)原，還可以讓每個(gè)工人都能根據(jù)實(shí)時(shí)且可視化的引導(dǎo)來進(jìn)行精準(zhǔn)的作業(yè)，每一個(gè)購(gòu)車用戶足不出戶在家看車。

數(shù)字展陳方面，Rokid?通過YodaOS-Master操作系統(tǒng)和AR創(chuàng)作工具Rokid 靈境，帶來了展覽形式的巨大變革，例如自然博物館將消失的物種通過AR進(jìn)行復(fù)原、購(gòu)物商場(chǎng)把宇宙空間搬進(jìn)了室內(nèi)等。

創(chuàng)新多元的表達(dá)形式，可以擺脫物理空間的限制降低搭建成本，通過還能數(shù)字化升級(jí)方案彌補(bǔ)傳統(tǒng)展陳方案的不足。今年4月，Rokid就同戰(zhàn)略合作伙伴釘釘一同發(fā)布了釘釘數(shù)字文化墻，通過AR數(shù)字展廳的打造降低企業(yè)文化墻建設(shè)門檻、縮短體驗(yàn)路徑。

教育方面，空間計(jì)算技術(shù)的加入，讓教育擺脫空間桎梏，抽象的知識(shí)能通過AR技術(shù)“真實(shí)”地展現(xiàn)在學(xué)生眼前，實(shí)現(xiàn)教學(xué)場(chǎng)景和教學(xué)模式的創(chuàng)新。

AR與汽車的結(jié)合，已不是新鮮事。在車載場(chǎng)景中，目前70%的新勢(shì)力汽車品牌都選擇Rokid車載娛樂解決方案。而在購(gòu)車場(chǎng)景中，空間計(jì)算能力的加持讓智能看車進(jìn)入空間交互時(shí)代。

通過空間交互，可以自動(dòng)切換車的顏色，車的輪轂；利用3D成像，對(duì)車輛進(jìn)行1:1 AR復(fù)刻，全息解剖車輛信息，對(duì)于普通消費(fèi)者很晦澀的專業(yè)詞匯，能一看就動(dòng)、一看就懂；更方便的是，Rokid聯(lián)合正在和更多車企建設(shè)車型庫(kù)，以后可以足不出戶在家看車，把4S店搬到每個(gè)人的家里。