北京意鏈科技有限公司(EM3)成立于2019年，致力于發(fā)展虛擬現(xiàn)實(shí)(Virtual Reality)、增強(qiáng)現(xiàn)實(shí)(Augmented Reality)技術(shù)研究。公司擁有業(yè)內(nèi)最薄的近眼顯示模組的設(shè)計(jì)和制造能力，并圍繞這一核心能力，供應(yīng)面向?qū)I(yè)用戶的VR/AR設(shè)備和方案。

公司聚焦最新 VR/AR 技術(shù)研發(fā)，通過(guò)在相關(guān)行業(yè)的不斷深度挖掘和高新科學(xué)技術(shù)的周密部署，實(shí)現(xiàn)了在算法、硬件、軟件、工業(yè)設(shè)計(jì)等在內(nèi)的跨越式突破，為產(chǎn)品的更新迭代奠定堅(jiān)實(shí)的技術(shù)基礎(chǔ)。不僅為用戶提高使用體驗(yàn)的愉悅度，也為用戶降低交互使用學(xué)習(xí)成本，讓每一個(gè)用戶能輕易的上手，高效的使用。

Stellar Pro 作為專業(yè) AR 設(shè)備，目標(biāo)場(chǎng)景包括先進(jìn)醫(yī)療、機(jī)器人控制、工業(yè)設(shè)計(jì)和邊緣智能部署。其中雙手 3D 高精度交互能力是技術(shù)亮點(diǎn)，Stellar Pro 能提供雙手各 21 個(gè)關(guān)鍵骨骼點(diǎn)的 3D 坐標(biāo)，用戶可以基于該 3D 坐標(biāo)開(kāi)發(fā)出與虛擬控制物體、軟鍵盤、虛擬人物進(jìn)行交互的 AR 程序，并且可以與真實(shí)的機(jī)器人、無(wú)人機(jī)和物聯(lián)網(wǎng)設(shè)備進(jìn)行交互。

如何提供精準(zhǔn)豐富的 UI 交互及運(yùn)行復(fù)雜 AI 模型成為兩大挑戰(zhàn)

Stellar Pro 的目標(biāo)用戶需要在工業(yè)現(xiàn)場(chǎng)調(diào)用復(fù)雜 AI 模型對(duì)實(shí)時(shí)圖像進(jìn)行處理，以完成特征提取、目標(biāo)識(shí)別和異常預(yù)警等任務(wù)?，F(xiàn)有的 AR 設(shè)備在這一典型場(chǎng)景下的最大挑戰(zhàn)來(lái)自如何提供精準(zhǔn)且豐富的 UI 交互，以及如何運(yùn)行復(fù)雜的 AI 模型。

面對(duì)以上兩項(xiàng)挑戰(zhàn)，意鏈科技選擇了 NVIDIA Jetson Xavier NX 方案。基于 NVIDIA Jetson Xavier NX 的 TensorRT 模型加速能力，Stellar Pro 可以以 30FPS 的幀率 0.1mm 的精度輸出雙手每個(gè)手指的骨節(jié)坐標(biāo)，使得用戶可以用精準(zhǔn)的進(jìn)行 UI 點(diǎn)選操作和虛擬交互，還可以同時(shí)調(diào)用 ONX 模型對(duì) RGB 相機(jī)的輸出進(jìn)行實(shí)時(shí)處理，并保存結(jié)構(gòu)化數(shù)據(jù)流，輸出預(yù)警信息。

NVIDIA Jetson Xavier NX 助力 Stellar Pro 實(shí)現(xiàn)精準(zhǔn)高效處理

NVIDIA Jetson Xavier NX 外形小巧，只有 70 毫米 x 45 毫米，卻將高達(dá) 21 TOPS 的加速 AI 計(jì)算帶到邊緣端。能夠并行運(yùn)行多個(gè)現(xiàn)代神經(jīng)網(wǎng)絡(luò)，處理來(lái)自多個(gè)高分辨率傳感器的數(shù)據(jù)，滿足 AI 系統(tǒng)的需求，而且是一款支持量產(chǎn)的產(chǎn)品，支持各種熱門 AI 框架。

Stellar Pro 在 NVIDIA Jetson Xavier NX 的支持下，整體系統(tǒng)提供了 SLAM、高精度 3D 裸手交互和機(jī)器學(xué)習(xí)等 AR 應(yīng)用相關(guān) API，并且提供了直接運(yùn)行 CUDA 生態(tài)的神經(jīng)網(wǎng)絡(luò)模型的能力，省去了二次轉(zhuǎn)換的步驟。Stellar Pro 的目標(biāo)場(chǎng)景包括 AR 應(yīng)用開(kāi)發(fā)，機(jī)器人控制，工業(yè)設(shè)計(jì)和邊緣智能部署。其中雙手 3D 高精度交互能力是技術(shù)亮點(diǎn)，Stellar Pro 能提供雙手各 21 關(guān)鍵骨骼點(diǎn)的 3D 坐標(biāo)，用戶可以基于該 3D 坐標(biāo)開(kāi)發(fā)出與虛擬控制物體、軟鍵盤、虛擬人物進(jìn)行交互的 AR 程序，并且可以與真實(shí)的機(jī)器人，無(wú)人機(jī)通過(guò)物聯(lián)網(wǎng)設(shè)備進(jìn)行交互。

NVIDIA 高性能邊緣計(jì)算平臺(tái)推動(dòng) AR 應(yīng)用市場(chǎng)煥發(fā)活力

意鏈科技產(chǎn)品技術(shù)負(fù)責(zé)人(VP)Minto Zheng 表示：“NVIDIA Jetson Xavier NX 高性能邊緣計(jì)算平臺(tái)，極大的提升 Stellar Pro 在 AI 邊緣計(jì)算高效處理能力，精準(zhǔn)、高效的完成應(yīng)用功能與計(jì)算平臺(tái)數(shù)據(jù)共聯(lián)，讓用戶擁有良好的體驗(yàn)值。與其它 AR 技術(shù)方案相比，最具典型的功能就是 Stellar Pro 在圖像處理中實(shí)現(xiàn)多通道精準(zhǔn)數(shù)據(jù)采集及高效的數(shù)據(jù)處理，讓用戶擁有更多功能交互，解決了 AR 分體設(shè)備功能受限于數(shù)據(jù)通道有限以及運(yùn)算差的技術(shù)阻礙，不斷提升用戶在工作、生活、學(xué)習(xí)中等各方面的研究效率，同時(shí)結(jié)合產(chǎn)品邊緣科學(xué)技術(shù)讓 AR 應(yīng)用市場(chǎng)更具新活力?！?/p>

“意鏈科技(EM3)今年新加入了 NVIDIA 初創(chuàng)加速計(jì)劃，能夠更加及時(shí)地獲取 NVIDIA 最新技術(shù)，并取得多方位的支持，希望能夠通過(guò)合作，為更多行業(yè)提供最具權(quán)威和穩(wěn)定的 AR 技術(shù)解決方案?！?/p>

NVIDIA 初創(chuàng)加速計(jì)劃

NVIDIA 初創(chuàng)加速計(jì)劃為免費(fèi)會(huì)員制，旨在培養(yǎng)顛覆行業(yè)格局的優(yōu)秀 AI 初創(chuàng)公司。初創(chuàng)加速計(jì)劃聯(lián)合了國(guó)內(nèi)外知名的風(fēng)投機(jī)構(gòu)、創(chuàng)業(yè)孵化器、創(chuàng)業(yè)加速器、行業(yè)合作伙伴以及科技創(chuàng)業(yè)媒體等，打造人工智能創(chuàng)業(yè)加速生態(tài)系統(tǒng)，能夠提供『產(chǎn)品折扣』、『市場(chǎng)宣傳』、『技術(shù)支持』、『融資平臺(tái)』、『客戶推薦』等一系列服務(wù)，加速初創(chuàng)公司的發(fā)展。

原文標(biāo)題：NVIDIA Jetson 加速邊緣計(jì)算，助力意鏈科技打造新一代分體式 AR 智能平臺(tái)

文章出處：【微信公眾號(hào)：NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。