
在今年的iPhone至少一個(gè)將采用3D深度相機在它的后面,用知識來(lái)確認源快速公司。
攝像頭(實(shí)際上是激光,傳感器和軟件系統)發(fā)出光來(lái)測量手機與手機前面的各種物體和表面之間的距離。這些詳細的深度信息將啟用新的照片和視頻效果,以及更好的增強現實(shí)體驗。
iPhone工程師從事后置3D相機的工作至少已有兩年了。它一直在新iPhone可能增加的功能的簡(jiǎn)短列表中,但是直到今年才降價(jià)。實(shí)際上,蘋(píng)果今年也可能決定取消它。不過(guò),到目前為止,它仍在設計中,我們希望它將在今年秋天首次見(jiàn)到(如果冠狀病毒不妨礙Apple的計劃)。
蘋(píng)果將??向位于圣何塞的Lumentum購買(mǎi)新3D所需的激光,該公司目前為iPhone的前置3D相機提供激光。
Lumentum表示,它并未討論在尚未發(fā)布的設備中使用激光技術(shù)的問(wèn)題。
蘋(píng)果不會(huì )是第一個(gè)在手機中添加后置深度攝像頭的公司。三星的Galaxy Note 10+和Galaxy S20 +和Galaxy S20 Ultra以及其他Android手機都已經(jīng)安裝了它們。但是蘋(píng)果公??司可能會(huì )發(fā)現一些新穎的方法來(lái)利用該技術(shù)獲得新的用戶(hù)體驗。如果歷史可以作為指導,那么在品牌和營(yíng)銷(xiāo)這些體驗的方式上可能會(huì )更加耀眼。
iPhone的正面已經(jīng)裝有深度相機(TrueDepth)。它們主要用于Face ID安全和一些有趣的消息傳遞效果,例如Animoji。
去年推出的iPhone 11 Pro和iPhone 11 Pro Max背面有三個(gè)相機鏡頭:一個(gè)12百萬(wàn)像素的廣角鏡頭,一個(gè)12百萬(wàn)像素的2X長(cháng)焦鏡頭和一個(gè)12百萬(wàn)像素的超廣角鏡頭。雖然這三個(gè)鏡頭提供了多種拍攝場(chǎng)景選項,但3D相機系統會(huì )添加深度信息。
目前,iPhone中的主要深度效果是人像模式,該模式為照片提供“散景”效果,該效果使背景圖層模糊并使前景主體(通常是人)清晰對焦。深度相機數據的添加可以通過(guò)更準確地區分前景層和背景層,并可能添加更多深度層來(lái)模糊或聚焦,來(lái)創(chuàng )建更好看的散景效果。在編輯模式下,可以調整照片的哪些圖層模糊以及哪些圖層聚焦。
深度的上升
3D映射可能與其他iPhone的照片軟件功能配合使用。想象一下一個(gè)視頻,其中一個(gè)跳躍中間的滑板手與背景斷開(kāi)連接,以完整3D和慢動(dòng)作呈現。
深度相機可能會(huì )對增強現實(shí)應用程序的質(zhì)量產(chǎn)生最大影響。蘋(píng)果三年前發(fā)布了用于開(kāi)發(fā)AR應用程序的ARKit框架,但是到目前為止,消費者還沒(méi)有真正喜歡它們。
Lumentum 3D感測副總裁Andre Wong說(shuō):“當您使用沒(méi)有深度信息的AR應用程序時(shí),它會(huì )有點(diǎn)毛病,并且沒(méi)有最終的強大。” “現在A(yíng)RKit和(Google的)ARCore都已經(jīng)問(wèn)世了一段時(shí)間,您會(huì )看到新的AR應用程序問(wèn)世,它們在空間中放置對象的方式更加準確。”
9to5Mac公司的本杰明·梅奧(Benjamin Mayo) 報道說(shuō),蘋(píng)果公司現在正在為iOS 14開(kāi)發(fā)一個(gè)AR應用程序,使用戶(hù)可以將iPhone指向蘋(píng)果商店和星巴克的商品,并在手機屏幕上看到圍繞商品的數字信息顯示。
Wong認為,后置3D相機可以使用戶(hù)創(chuàng )建數字內容,從而非常適合社交媒體共享。例如,人們可能想與自己的客廳中的動(dòng)物或名人的全息圖像共享自己的圖像。這類(lèi)似于開(kāi)發(fā)人員8i的Holo應用程序,但是使用深度數據,這些體驗可能會(huì )大大改善。
例如,站在真實(shí)世界的桌子頂部的人的全息圖像可能以干凈且令人信服的方式顯示全息圖腳部相對于桌面的邊緣。當僅依靠手機現有的攝像頭和軟件時(shí),如果沒(méi)有深度數據就很難創(chuàng )建。
技術(shù)如何運作
深度相機系統背后的核心技術(shù)是后置垂直腔面發(fā)射激光器(VCSEL),該激光器以恒定的速率發(fā)出光波,然后測量每次反射從環(huán)境中物體反彈回傳感器的時(shí)間。從手機附近的物體返回的光具有較短的“飛行時(shí)間”,而從較遠的物體返回的光具有較長(cháng)的飛行時(shí)間。iPhone的前置深度攝像頭發(fā)出的光僅傳播了幾英尺(這對放置手持電話(huà)的人來(lái)說(shuō)很合適),但后置系統中使用的Lumentum激光的射程將更長(cháng)。
在三星手機中,3D相機是兩項功能背后的技術(shù)。Live Focus允許用戶(hù)模糊靜止圖像和視頻中的背景,從而更加強調前景中的人(或寵物)??焖贉y量可讓您估算相機框架內對象的寬度,高度,面積和體積。蘋(píng)果公司可能采取類(lèi)似的方法,并強調兩個(gè)或三個(gè)選框功能(例如9to5Mac報告的AR功能),這些功能由后置3D相機啟用。
某種程度的懷疑是為了使后部3D感測在今年的iPhone中可能會(huì )產(chǎn)生影響,這也是第一款5G iPhone。至少在短期內,與改進(jìn)的AR相比,照片效果可能會(huì )引起更多關(guān)注。AR開(kāi)發(fā)人員的確會(huì )使用新的深度數據創(chuàng )造更好的體驗。但是,即使掌握了更好的技術(shù),他們仍然必須創(chuàng )造消費者經(jīng)常喜歡和使用的體驗。而巨大的限制因素是,通過(guò)臉部智能手機屏幕觀(guān)看AR會(huì )遇到尷尬的體驗。
但是這種情況可能不會(huì )持續太久。蘋(píng)果正在開(kāi)發(fā)AR頭戴式眼鏡或一副眼鏡,這是硅谷最不為人知的秘密之一,從長(cháng)遠來(lái)看,它可能成為該公司的主要空間計算設備。
