在今年的iPhone至少一個(gè)將采用3D深度相機(jī)在它的后面,用知識(shí)來確認(rèn)源快速公司。
攝像頭(實(shí)際上是激光,傳感器和軟件系統(tǒng))發(fā)出光來測量手機(jī)與手機(jī)前面的各種物體和表面之間的距離。這些詳細(xì)的深度信息將啟用新的照片和視頻效果,以及更好的增強(qiáng)現(xiàn)實(shí)體驗(yàn)。
iPhone工程師從事后置3D相機(jī)的工作至少已有兩年了。它一直在新iPhone可能增加的功能的簡短列表中,但是直到今年才降價(jià)。實(shí)際上,蘋果今年也可能決定取消它。不過,到目前為止,它仍在設(shè)計(jì)中,我們希望它將在今年秋天首次見到(如果冠狀病毒不妨礙Apple的計(jì)劃)。
蘋果將??向位于圣何塞的Lumentum購買新3D所需的激光,該公司目前為iPhone的前置3D相機(jī)提供激光。
Lumentum表示,它并未討論在尚未發(fā)布的設(shè)備中使用激光技術(shù)的問題。
蘋果不會(huì)是第一個(gè)在手機(jī)中添加后置深度攝像頭的公司。三星的Galaxy Note 10+和Galaxy S20 +和Galaxy S20 Ultra以及其他Android手機(jī)都已經(jīng)安裝了它們。但是蘋果公??司可能會(huì)發(fā)現(xiàn)一些新穎的方法來利用該技術(shù)獲得新的用戶體驗(yàn)。如果歷史可以作為指導(dǎo),那么在品牌和營銷這些體驗(yàn)的方式上可能會(huì)更加耀眼。
iPhone的正面已經(jīng)裝有深度相機(jī)(TrueDepth)。它們主要用于Face ID安全和一些有趣的消息傳遞效果,例如Animoji。
去年推出的iPhone 11 Pro和iPhone 11 Pro Max背面有三個(gè)相機(jī)鏡頭:一個(gè)12百萬像素的廣角鏡頭,一個(gè)12百萬像素的2X長焦鏡頭和一個(gè)12百萬像素的超廣角鏡頭。雖然這三個(gè)鏡頭提供了多種拍攝場景選項(xiàng),但3D相機(jī)系統(tǒng)會(huì)添加深度信息。
目前,iPhone中的主要深度效果是人像模式,該模式為照片提供“散景”效果,該效果使背景圖層模糊并使前景主體(通常是人)清晰對(duì)焦。深度相機(jī)數(shù)據(jù)的添加可以通過更準(zhǔn)確地區(qū)分前景層和背景層,并可能添加更多深度層來模糊或聚焦,來創(chuàng)建更好看的散景效果。在編輯模式下,可以調(diào)整照片的哪些圖層模糊以及哪些圖層聚焦。
深度的上升
3D映射可能與其他iPhone的照片軟件功能配合使用。想象一下一個(gè)視頻,其中一個(gè)跳躍中間的滑板手與背景斷開連接,以完整3D和慢動(dòng)作呈現(xiàn)。
深度相機(jī)可能會(huì)對(duì)增強(qiáng)現(xiàn)實(shí)應(yīng)用程序的質(zhì)量產(chǎn)生最大影響。蘋果三年前發(fā)布了用于開發(fā)AR應(yīng)用程序的ARKit框架,但是到目前為止,消費(fèi)者還沒有真正喜歡它們。
Lumentum 3D感測副總裁Andre Wong說:“當(dāng)您使用沒有深度信息的AR應(yīng)用程序時(shí),它會(huì)有點(diǎn)毛病,并且沒有最終的強(qiáng)大。” “現(xiàn)在ARKit和(Google的)ARCore都已經(jīng)問世了一段時(shí)間,您會(huì)看到新的AR應(yīng)用程序問世,它們?cè)诳臻g中放置對(duì)象的方式更加準(zhǔn)確。”
9to5Mac公司的本杰明·梅奧(Benjamin Mayo) 報(bào)道說,蘋果公司現(xiàn)在正在為iOS 14開發(fā)一個(gè)AR應(yīng)用程序,使用戶可以將iPhone指向蘋果商店和星巴克的商品,并在手機(jī)屏幕上看到圍繞商品的數(shù)字信息顯示。
Wong認(rèn)為,后置3D相機(jī)可以使用戶創(chuàng)建數(shù)字內(nèi)容,從而非常適合社交媒體共享。例如,人們可能想與自己的客廳中的動(dòng)物或名人的全息圖像共享自己的圖像。這類似于開發(fā)人員8i的Holo應(yīng)用程序,但是使用深度數(shù)據(jù),這些體驗(yàn)可能會(huì)大大改善。
例如,站在真實(shí)世界的桌子頂部的人的全息圖像可能以干凈且令人信服的方式顯示全息圖腳部相對(duì)于桌面的邊緣。當(dāng)僅依靠手機(jī)現(xiàn)有的攝像頭和軟件時(shí),如果沒有深度數(shù)據(jù)就很難創(chuàng)建。
技術(shù)如何運(yùn)作
深度相機(jī)系統(tǒng)背后的核心技術(shù)是后置垂直腔面發(fā)射激光器(VCSEL),該激光器以恒定的速率發(fā)出光波,然后測量每次反射從環(huán)境中物體反彈回傳感器的時(shí)間。從手機(jī)附近的物體返回的光具有較短的“飛行時(shí)間”,而從較遠(yuǎn)的物體返回的光具有較長的飛行時(shí)間。iPhone的前置深度攝像頭發(fā)出的光僅傳播了幾英尺(這對(duì)放置手持電話的人來說很合適),但后置系統(tǒng)中使用的Lumentum激光的射程將更長。
在三星手機(jī)中,3D相機(jī)是兩項(xiàng)功能背后的技術(shù)。Live Focus允許用戶模糊靜止圖像和視頻中的背景,從而更加強(qiáng)調(diào)前景中的人(或?qū)櫸???焖贉y量可讓您估算相機(jī)框架內(nèi)對(duì)象的寬度,高度,面積和體積。蘋果公司可能采取類似的方法,并強(qiáng)調(diào)兩個(gè)或三個(gè)選框功能(例如9to5Mac報(bào)告的AR功能),這些功能由后置3D相機(jī)啟用。
某種程度的懷疑是為了使后部3D感測在今年的iPhone中可能會(huì)產(chǎn)生影響,這也是第一款5G iPhone。至少在短期內(nèi),與改進(jìn)的AR相比,照片效果可能會(huì)引起更多關(guān)注。AR開發(fā)人員的確會(huì)使用新的深度數(shù)據(jù)創(chuàng)造更好的體驗(yàn)。但是,即使掌握了更好的技術(shù),他們?nèi)匀槐仨殑?chuàng)造消費(fèi)者經(jīng)常喜歡和使用的體驗(yàn)。而巨大的限制因素是,通過臉部智能手機(jī)屏幕觀看AR會(huì)遇到尷尬的體驗(yàn)。
但是這種情況可能不會(huì)持續(xù)太久。蘋果正在開發(fā)AR頭戴式眼鏡或一副眼鏡,這是硅谷最不為人知的秘密之一,從長遠(yuǎn)來看,它可能成為該公司的主要空間計(jì)算設(shè)備。