把激光雷達放在iPad上是怎樣的體驗?看到“測距儀”App的效果我震驚了
編者按:本文來自微信公眾號“量子位”(ID:QbitAI),作者:曉查,36氪經(jīng)授權發(fā)布。
就在今天早晨,蘋果發(fā)布了iOS/iPadOS 13.4更新,除了常規(guī)升級,還有個看似不起眼的更新:加入了ARKit 3.5。
如果你關注過上周發(fā)布的iPad Pro,想必已經(jīng)能猜到,ARKit 3.5是就是為它的激光雷達準備的。
從2017年開始,蘋果就開始大力推廣AR(增強現(xiàn)實),但只有發(fā)布會上的MineCraft等游戲展示令人印象深刻,之后鮮有廠商跟進。曾經(jīng)開發(fā)AR眼鏡的Magic Leap也瀕臨“賣身”。
AR似乎遠遠看不到大范圍實際應用的那一天,但是iPad Pro激光雷達的出現(xiàn)可能改變這一局面。
關于ARKit 3.5在今天更新的ARKit 3.5中,蘋果添加了一個新的“場景幾何”(Scene Geometry)API,允許開發(fā)者使用iPad Pro上激光雷達掃描儀創(chuàng)建房間的3D地圖,識別地板、墻壁、天花板、桌椅沙發(fā)等。
能夠在5米范圍內(nèi)精準測量物體的長寬高,感知到物體每個平面的方向,甚至還能發(fā)現(xiàn)物體之間的遮擋關系,讓嵌入在視頻的中數(shù)字內(nèi)容與場景更好地融合在一起。
這讓iOS自帶的測距儀App體驗有了質(zhì)的飛躍。
之前的iPad和iPhone都是通過攝像頭的景深來感知物體的遠近,實際上測距儀的照片中并不包含真正的3D信息。
用過測距儀的用戶都知道,比如我們在測量桌子長度的時候,測距儀的起點和終點很難精準地放置在桌子邊緣上。這使得我們的測量準確度大打折扣。
iPad Pro上測距儀App因為有了激光雷達的存在,與其他蘋果設備有很大的不同。
而配備了激光雷達的iPad Pro當它到達要測量的桌子等物體的末端時,能夠自動識別邊緣。
△圖片轉(zhuǎn)自魏布斯視頻
而且如果你走得更近,則會在屏幕上展示更多細節(jié),比如自動顯示的新標尺視圖。
數(shù)碼評測達人魏布斯在他的評測視頻中對iPad Pro的激光雷達有詳細的介紹:
盡管蘋果沒有特別提及,但激光雷達也將改善相機拍攝效果,今后在采用人像模式時,背景虛化也會更加精準。
iPad上的激光雷達激光雷達之前已經(jīng)廣泛用在自動駕駛汽車上,用于物體的3D成像。蘋果的自動駕駛秘密項目Titan Project也用過激光雷達。
蘋果在2017年發(fā)表的一篇研究論文詳細介紹了自動駕駛汽車上的3D對象識別系統(tǒng)。該系統(tǒng)利用了激光雷達的深度圖,與神經(jīng)網(wǎng)絡結(jié)合起來,大大提高了自動駕駛汽車識別環(huán)境的能力。
如今蘋果的自動駕駛汽車計劃已擱淺,但激光雷達卻被用在了移動設備上。
那么iPad Pro上的這顆激光雷達有何特別之處呢?
iPad Pro上的這顆LiDAR本質(zhì)上是一顆飛行時間傳感器(ToF)。ToF現(xiàn)在被各大手機廠商用在相機的對焦上。
但蘋果使用的ToF與其他廠商不同,它是一顆真正根據(jù)飛行時間計算距離的傳感器dToF。
其他廠商都是根據(jù)相位差,利用發(fā)射光線和反射回的光線之間的相位干涉來判斷時間和距離。
而是更具發(fā)射光子反射回來的時間差來計算距離,這顆ToF能以納秒(十億分之一秒)速度運行,精度更高、能耗更低。正是這個傳感器的出現(xiàn)讓AR應用成為可能。
用iPad拍攝照片看起來相當笨拙,但是今年的iPhone可能配備激光雷達,如果蘋果的AR眼鏡計劃付諸實踐,那么未來的蘋果AR眼鏡也一定會有激光雷達相助。
令人高興的是,外媒AppleInsider爆料稱,iOS 14的代碼中顯示今年的iPhone會加入激光雷達。只是iPhone背后的三攝排列似乎沒有給激光雷達留下足夠的空間,難道iPhone的攝像頭布局還要改嗎?
參考鏈接
蘋果更新ARKit 3.5:https://venturebeat.com/2020/03/24/apple-releases-arkit-3-5-adding-scene-geometry-api-and-lidar-support/
魏布斯評測新版iPad Pro(感謝魏布斯授權轉(zhuǎn)載):https://mp.weixin.qq.com/s/_23UXcD4KogAZBlEAJbV-g
作者系網(wǎng)易新聞·網(wǎng)易號“各有態(tài)度”簽約作者