2020年3月8日消息，Nreal宣布與Clay AIR合作，在Nreal Light上新增手勢追蹤功能，同時結合新的內容，強化與德國DT（Deutsche Telekom）等歐盟運營商的合作關系。

與Clay AIR合作，Nreal Light新增手勢追蹤功能

通常，手勢追蹤需要增加專用的手勢追蹤模塊或者傳感器才能實現，而隨著計算機視覺的發(fā)展，使用普通2D攝像頭，加上算法識別也開始能夠實現較為精準的手勢操作。Nreal不是第一款獲得手勢追蹤功能的MR眼鏡。微軟的HoloLens 2和Magic Leap One都具有此功能，但這是第一款不借助深度傳感器視線手勢追蹤的MR眼鏡，就像Oculus Quest是第一款實現的移動VR頭顯一樣。沒有硬件獲取深度信息的實時手部跟蹤要困難得多，這需要先進的機器學習算法。

而Clay AIR，就是一家不需要增加深度攝像頭等硬件模塊，通過軟件算法就能實現手勢操作的軟件公司。Clay AIR在2018年曾經與高通合作，為OEM提供關鍵交互技術，以加速AR&VR設備的采用。這是該公司在AR&VR頭戴式顯示器（HMD）中實現標準化手動跟蹤功能的重要目標的一部分。據了解，通過Clay的軟件算法，已經可以識別包括拿、捏、抓、輕掃等超過30種用戶的手勢動作，從而操縱虛擬物體，與MR環(huán)境更直觀地進行交互。

基于Nreal Light上用于Slam的攝像頭傳感器，加上Clay AIR的軟件算法，識別出用戶的真實手部骨骼后，將3D手部模型以全高清方式進行疊加，并通過機器學習對用戶手指和手部動作的實時變化進行跟蹤和渲染。由于Nreal Light能夠連接搭載高通驍龍855及以上平臺的5G智能手機運行，不僅能夠實時流暢地計算手勢動作、對圖形進行渲染，同時手機供電也確保了更強的電池續(xù)航能力。

據了解，手勢識別功能將在近期通過Nreal SDK提供給開發(fā)者，應用在支持Nreal 3D系統星云的安卓應用程序中。通過Nreal SDK，開發(fā)人員可以進行手勢追蹤的自定義，包括重塑或渲染全手、單獨的手指、邊界框、光標或自定義外觀，前期完全支持的手勢包括捏、指向、抓取、滑動和縮放。

在MR體驗中，手勢操作被視為是最自然的交互方式，為了追求更流暢的用戶體驗，Nreal此次Clay AIR的手勢追蹤功能引入到Nreal Light上來，不僅能降低操作的學習門檻，還能提升用戶體驗的靈活性。

“通過提供手勢追蹤功能，Nreal為Nreal Light 消費者版的開發(fā)人員和用戶提供了更大程度的靈活性，使其可以與MR環(huán)境進行交互。無論是手勢追蹤、5G智能手機控制、還是6DoF控制器、眼動追蹤、語音交互等，事實上，我們并不認為其中單一一種方式是與MR交互的最佳方法，實際上可以同時包含多種控制選項?！背耸謩葑粉欀?，日前Nreal與七鑫易維合作，宣布推出結合眼動追蹤功能的Nreal Light眼鏡。Nreal的首席執(zhí)行官兼創(chuàng)始人徐馳說道：“我們希望為開發(fā)人員和用戶提供多種選擇，讓他們自己來決定最適合的方法?！?/p>

Clay AIR的CRO Varag Gharibjanian也提到：“ 我們很榮幸參與了Nreal引發(fā)的革命，他們是消費者AR的領導者，我們期待與他們一起創(chuàng)新共同創(chuàng)建行業(yè)平臺?！?/p>

“一款對于消費者友好的硬件，加上無縫的手勢追蹤和手勢識別技術，是使AR在全球范圍內實用化的必要催化劑?！?Clay AIR首席執(zhí)行官Thomas Amilien認為，雙方合作關系的建立標志著拐點的出現。

在過去的十年中，許多公司都在推進AR眼鏡在行業(yè)及消費端的應用，推動AR眼鏡時代的來臨，但實際上早期嘗試的很多公司都失敗了，包括Meta、ODG和Daqri。 Magic Leap曾經被認為是大眾市場MR頭顯的最佳機會，但它也轉向了更小但更成熟的行業(yè)市場發(fā)展。

相對而言，像Nreal這樣的玩家有兩個方面的優(yōu)勢。首先，AR眼鏡是展示5G網絡速度的一種引人注目的方式，如果可以遠程傳輸大量數據，則可以通過輕量級硬件提供令人印象深刻的體驗。其次，有傳言稱蘋果將推出AR眼鏡，這可能會增加該硬件形態(tài)成為主流的機會，同時也為該領域增加了一個強大的競爭對手。

強化與歐盟運營商合作，推動5G+AR應用

在增加Nreal Light功能的同時，Nreal也在積極推進其在歐洲的運營商合作伙伴網絡，與英國EE合作之后又宣布與德國DT電信運營商建立了合作關系，向歐洲市場用戶提供Nreal Light及5G定制應用。去年12月在高通公司的驍龍技術峰會上展示的AR Field Advisor是一種協作式機器/硬件遠程修復應用程序，它將與Nreal Light的新5G游戲和娛樂內容一同加入Nreal的內容平臺。

“我們相信混合現實將改變人們的工作、生活和互動方式?！钡聡鳧T產品創(chuàng)新和客戶服務高級副總裁Omar Tazi說道， “混合現實是沉浸式娛樂未來的起點，Nreal在將該技術推向大眾市場方面邁出了一大步。通過提供從邊緣計算到最佳連接性的關鍵技術，再結合用于娛樂的最佳內容，例如音樂演唱會、體育賽事甚至是游戲，德國DT將與Nreal一起釋放混合現實的全部潛力?！?/p>

在亞洲，Nreal通過在LG Uplus零售店以及日本KDDI直營店展示Nreal Light設備的舉措，將MR帶入了韓國、日本消費者的生活，并取得了長足的進步。

在CES 2020上，Nreal推出了其備受贊譽的3D MR系統“星云”，星云系統作為在MR環(huán)境中移植和顯示2D原生安卓應用程序和交互式3D內容的方式，首次向消費者展示了一個多維的界面，該界面專門為Nreal Light上的MR環(huán)境設計，能夠讓用戶獲得更沉浸的體驗?，F在，通過與手勢追蹤相結合，MR開發(fā)人員和企業(yè)客戶可以為用戶構建更加身臨其境且真正互動的MR應用程序。

日前，Nreal還與Spatial、高通、運營商合作，共同推動SpaTIal AR協作應用落地，該內容也將在不久后登陸星云系統。

SpaTIal的空間協作MR應用將為用戶提供不受物理空間限制的遠程協作解決方案。用戶只需戴上Nreal Light眼鏡，并將其連接在支持高通平臺的5G智能手機上，運行SpaTIal應用即可體驗首款針對MR平臺推出的5G優(yōu)化協作會議解決方案。