新專(zhuān)利顯示未來(lái)蘋(píng)果硬件可以從平面視頻中創(chuàng)造出合成現(xiàn)實(shí)場(chǎng)景

蘋(píng)果公司正在開(kāi)發(fā)一種系統(tǒng)，可以從平面視頻內(nèi)容生成混合現(xiàn)實(shí)或虛擬現(xiàn)實(shí)環(huán)境，讓用戶(hù)在原本只能是二維的片段中穿行和探索。周四由美國(guó)專(zhuān)利和商標(biāo)局公布了名為“用于生成平面視頻內(nèi)容合成現(xiàn)實(shí)重建的方法和設(shè)備”的蘋(píng)果專(zhuān)利。該專(zhuān)利開(kāi)宗明義地將合成現(xiàn)實(shí)（synthesized reality）或SR定義為數(shù)字生成的物體和環(huán)境。SR本質(zhì)上是一個(gè)廣泛的類(lèi)別，蘋(píng)果表示包括虛擬現(xiàn)實(shí)、增強(qiáng)現(xiàn)實(shí)和混合現(xiàn)實(shí)。

用戶(hù)可以在設(shè)備上參與SR體驗(yàn)，無(wú)論是iPhone或iPad這樣的手持設(shè)備，還是傳聞中的 “蘋(píng)果眼鏡 ”這樣的頭戴式設(shè)備。他們可以通過(guò)一種或多種感官，包括視覺(jué)、味覺(jué)、嗅覺(jué)和觸覺(jué)，與SR環(huán)境進(jìn)行互動(dòng)。然而，該專(zhuān)利的大部分內(nèi)容集中在一個(gè)可以從平面視頻內(nèi)容中生成SR角色、物體和環(huán)境的系統(tǒng)上。換句話說(shuō)，它可以將電視節(jié)目變成一個(gè)用戶(hù)可以用上述設(shè)備探索的VR環(huán)境。

正如蘋(píng)果公司所指出的那樣，大多數(shù)SR內(nèi)容都是提前精心制作，然而，該專(zhuān)利描述了一種通過(guò) “利用數(shù)字資產(chǎn) ”生成視頻內(nèi)容的按需SR重構(gòu)方法，以無(wú)縫、快速地將平面內(nèi)容移植到SR體驗(yàn)中。該系統(tǒng)工作原理是識(shí)別場(chǎng)景中的 “情節(jié)執(zhí)行者”，合成場(chǎng)景描述，并通過(guò)根據(jù)場(chǎng)景描述驅(qū)動(dòng)與第一情節(jié)執(zhí)行者相關(guān)聯(lián)的第一數(shù)字資產(chǎn)生成場(chǎng)景重建。

雖然系統(tǒng)可以根據(jù)視頻內(nèi)容生成SR重建，但它也可以從相關(guān)文本內(nèi)容和外部數(shù)據(jù)中獲取信息。那可能是視頻片段中演員的照片、演員的身高和尺寸、場(chǎng)景的各種視圖以及其他數(shù)據(jù)。在一些實(shí)施例中，數(shù)字資產(chǎn)至少部分地基于視頻內(nèi)容和與視頻內(nèi)容相關(guān)聯(lián)的外部數(shù)據(jù)而即時(shí)生成。有趣的是，蘋(píng)果還指出，類(lèi)似的SR生成系統(tǒng)可以基于音頻和相關(guān)內(nèi)容，包括有聲讀物、廣播劇和其他純音頻內(nèi)容建交互式場(chǎng)景。

蘋(píng)果每周都會(huì)提交大量的專(zhuān)利申請(qǐng)，但是無(wú)法保證其中所描述的技術(shù)能夠進(jìn)入市場(chǎng)。同樣，專(zhuān)利申請(qǐng)也沒(méi)有給出任何跡象表明蘋(píng)果何時(shí)會(huì)發(fā)布搭載該技術(shù)的新產(chǎn)品。

責(zé)任編輯：haq