來源:新浪VR
蘋果公司對激光雷達非常看好,激光雷達是iPhone 12 Pro和iPhone 12 Pro Max的全新技術。(iPhone 12 Pro現在正在銷售中,而iPhone 12 Pro Max將 在幾周后上市。)
仔細觀察其中一個新的iPhone 12 Pro機型或最新的iPad Pro,會在相機鏡頭附近看到一個小黑點,大小與閃光燈相同。那就是激光雷達傳感器,它是一種新型的深度感應,可以在許多有趣的方式上有所作為。
如果蘋果采用這種方式,激光雷達是一個術語,現在將開始聽到很多,所以讓我們分解一下我們所知道的,蘋果將使用它的用途以及該技術的下一步發(fā)展。
激光雷達是什么意思?
激光雷達代表光檢測和測距,已經存在了一段時間。它使用激光探測物體并返回激光源,通過定時光脈沖的行進或飛行來測量距離。
激光雷達如何感應深度?
激光雷達是一種飛行時間相機。其他一些智能手機僅用一個光脈沖即可測量深度,而采用這種激光雷達技術的智能手機則以一陣紅外線點的形式發(fā)送出光脈沖波,并可以利用其傳感器測量每個脈沖,從而創(chuàng)建出可繪制距離的點場并可以“網格化”空間及其內部對象的尺寸。人眼看不見光脈沖,但是您可以用夜視攝像機看到它們。
這不像iPhone上的Face ID嗎?
是的,但是范圍更大。這個想法是一樣的:蘋果的支持面部識別的TrueDepth相機也可以發(fā)射出一系列紅外激光,但只能在幾英尺遠的地方工作。iPad Pro和iPhone 12 Pro上的后激光雷達傳感器可在不超過5米的范圍內工作。
激光雷達已經在很多其他技術中
激光雷達是一種隨處可見的技術。它用于自動駕駛汽車或輔助駕駛。它用于機器人技術和無人機。像HoloLens 2這樣的增強現實耳機具有類似的技術,可以在將3D虛擬對象分層之前將空間映射出來。但是它也有很長的歷史。
微軟的舊款深度感應Xbox配件Kinect也是一款具有紅外深度掃描功能的相機。實際上,幫助制造Kinect技術的公司PrimeSense在2013年被Apple收購。現在,我們有了蘋果公司的人臉掃描TrueDepth和后激光雷達攝像頭傳感器。
iPhone 12 Pro相機與激光雷達配合使用效果更好
智能手機上的飛行時間相機通常用于提高對焦精度和速度,而iPhone 12 Pro也是如此。蘋果承諾更好的弱光聚焦,在弱光條件下的速度可以提高六倍。激光雷達深度感應也可用于改善夜間人像模式效果。到目前為止,它已經產生了影響:請閱讀我們對iPhone 12 Pro的評論以了解更多信息。
更好的聚焦是一個加號,而且iPhone 12 Pro也有可能在圖像中添加更多3D照片數據。盡管尚未布置該元素,但蘋果公司的前置式,深度感應的TrueDepth相機已在應用程序中以類似的方式使用,第三方開發(fā)人員可以深入研究并提出一些想法。
它還大大增強了增強現實
激光雷達可以使iPhone 12 Pro更快地啟動AR應用程序,并快速建立房間地圖以添加更多細節(jié)。iOS 14中許多Apple的AR更新都利用激光雷達將虛擬對象隱藏在真實對象之后(稱為遮擋),并將虛擬對象放置在更復雜的房間映射中,例如在桌子或椅子上。
我已經在Apple Arcade游戲Hot Lava上對其進行了測試,該游戲已經使用激光雷達掃描房間及其所有障礙物。我能夠在樓梯上放置虛擬對象,并將東西隱藏在房間中真實對象的后面。預計會有更多的AR應用程序將開始添加像這樣的激光雷達支持,以獲得更豐富的體驗。
Snapchat的下一波鏡頭將開始使用iPhone 12 Pro的激光雷達采用深度感應。
但是除此之外,還有更大的潛力,尾巴更長。許多公司都夢想著將虛擬物體與真實物體融合在一起的頭戴設備:AR眼鏡(由Facebook,Qualcomm,Snapchat,Microsoft,Magic Leap 和最有可能的蘋果等公司開發(fā))將依賴于擁有先進的3D地圖來將虛擬對象分層。
這些3D地圖現在正在使用特殊的掃描儀和設備進行構建,幾乎就像那些Google Maps汽車的世界掃描版本一樣。但是人們自己的設備有可能最終幫助眾籌該信息,或添加額外的實時數據。同樣,Magic Leap和HoloLens這樣的AR頭戴設備已經在對環(huán)境進行分層之前對其進行了預掃描,而配備了激光雷達的Apple AR技術也以相同的方式工作。從這個意義上講,iPhone 12 Pro和iPad Pro就像是AR耳機,但沒有耳機部分……并且可以為Apple最終制造自己的眼鏡鋪平道路。
通過Occipital的Canvas應用程序進行的3D房間掃描,由iPad Pro上的深度感應激光雷達實現。iPhone 12 Pro的預期相同,甚至更多。
3D掃描可能是殺手級應用
激光雷達可用于劃分3D對象和房間,并在頂部對照片圖像進行分層,該技術稱為攝影測量法。那可能是下一波捕獲技術的實際應用,例如居家裝修,甚至社交媒體和新聞業(yè)。捕獲3D數據并與他人共享該信息的能力可以使這些配備了激光雷達的手機和平板電腦成為3D內容捕獲工具。激光雷達也可以在沒有攝像頭的情況下用于獲取物體和空間的測量值。
我已經在iPhone 12 Pro上嘗試了一些早期的啟用了激光雷達的3D掃描應用程序(3D掃描儀應用程序,激光雷達掃描儀和Record3D),但取得了不同的成功,但是它們可用于掃描物體或以驚人的速度繪制房間的地圖。激光雷達的有效掃描范圍為16英尺,足以覆蓋我家中大多數房間,但在較大的室外空間中,移動所需的時間更多。同樣,蘋果的前置TrueDepth相機在近距離范圍內已經可以做類似的事情。
蘋果并不是第一個在手機上探索這種技術的人
創(chuàng)建Tango項目(一個僅在兩部手機上使用的早期AR平臺)時,Google便想到了同樣的想法。先進的攝像頭陣列還具有紅外傳感器,可以繪制房間,為AR和測量室內空間創(chuàng)建3D掃描和深度圖。Google的配備Tango的手機壽命很短,被計算機視覺算法所取代,該算法無需使用相同的硬件就可以在相機上進行深度感知。但是蘋果的iPhone 12 Pro看起來像是一個更先進的繼任者,它的激光雷達可能會擴展到汽車,AR耳機等等。