路線的沉浸式視圖已開始在 15 個城市推出。以下是我們如何使用 AI 和圖像將其變為現實。
導航到目的地時，瞭解您的路線會很有幫助，這樣您就可以放心地旅行。假設您騎自行車去公園見朋友;您可以查看天氣，查看沿途是否有封路，或者在街景上查看自行車停放情況。因此，我們推出了路線沉浸式視圖，該功能可在單個多維視圖中為您提供有關旅程所需的所有資訊，例如天氣和交通情況，無論您是步行、騎自行車還是騎自行車。此功能已開始在 15 個城市推出，它建立在沉浸式視圖的基礎上，可讓您在出發前體驗某個地方。
以下是 AI 和圖像如何在 Google 地圖中為路線帶來沉浸式檢視的幕後花絮。
將 2D 影像拼圖拼湊在一起
首先，收集了數十億張高解析度圖像 —— 這些圖像可能來自飛機、街景汽車和徒步旅行者。然後將圖像拼接在一起，感覺就像把世界上最大的拼圖拼在一起。
從理論上講，這聽起來相對簡單，但有幾個因素使這個過程相當複雜。所有圖像都需要與現有的 Google 地圖數據保持一致，以便每條道路、街道和商家名稱都適合在一起。這只有通過我們先進的攝影測量技術才能實現，這些技術可以在釐米內對齊圖像和數據。
使用機器學習提取和標記有用的資訊
一旦圖像對齊，我們就會使用人工智慧和計算機視覺來理解其中的內容。在幾秒鐘內，我們的機器學習模型可以理解照片中的元素，如人行道、路標、限速標誌、道路名稱、位址、張貼的上班時間和建築物入口。這些模型經過來自世界各地的數百萬張照片的訓練，因此它們能夠學習和適應不同的地區。例如，他們可以識別出美國的 “SLOW” 標誌，它是黃色或橙色的鑽石，而在日本，它是三角形的，主要是白色和紅色。
瞭解這些元素有助於我們在沉浸式視圖中向你顯示路線的最有用的資訊。例如，這使我們能夠將您直接引導到建築物的入口，而不僅僅是一般的附近，從而為您節省了在街區周圍花費的時間！
將 2D 影像轉換為 3D
準備好所有視覺效果和對象標籤后，是時候重建 3D 世界了。構建 3D 地圖的最大挑戰之一是對道路地形和建築物高度進行建模。為此，我們使用了最先進的航空相機系統的圖像，這些圖像與用於拍攝好萊塢電影的 3D 相機非常相似。這些系統的攝像機集群指向略微不同的方向，使它們能夠從多個視角拍攝照片並準確瞭解深度。一旦我們有了這組圖像，我們先進的攝影測量技術就會幫助我們將它們放在世界的 2D 模型之上，將其轉換為 3D 模型。
創建切合實際、有用的路線
一旦我們的模型是 3D 的，我們就需要實際向您展示如何導航。這是將路線的沉浸式視圖與地點的沉浸式檢視區分開來的部分。在 3D 模式下疊加路線線的最大挑戰之一是創建逼真且有用的旅行路徑概覽，無論是道路、自行車道還是人行道。我們使用幾種技術來解決這個問題。
我們包括許多複雜的相機縮放、平移和傾斜，以向您展示有關路線的全域概覽和街道細節。我們使用一種稱為遮擋的技術來隱藏藍色路線線，當它打算在建築物後面、橋下或樹木周圍時。為了確保所有這些動態運動不會讓您感到跳躍或刺耳，我們使用一種稱為 B 樣條曲線的數學結構來創建具有清晰路線視圖的平滑相機路徑。結合這些技術，我們的系統可以快速計算出每一步應該看到什麼，並始終即時生成一條易於遵循且美觀的路徑。
添加 Google 地圖可信的真實資訊
最後，我們會將 Google 地圖的可信資訊（如天氣、空氣品質和交通情況）分層，以便您可以直觀地瞭解您的路線在一天和一周內的情況變化時會是什麼樣子。
為了類比當前和未來的即時交通狀況，我們與 Google Research 合作，分析歷史的匯總駕駛趨勢。因此，如果已知某條街道在週四下午 5 點因送貨卡車的交通擁堵而擁堵，您將看到更多卡車反映在沉浸式視圖中。這使您可以瞭解在路上可能遇到的情況。
將一切整合在一起
所有這些結合在一起，通過利用設備上的即時雲渲染，在手機上向您顯示您的路線，因此您可以從手掌中可視化您的去向。航線的沉浸式視圖已開始在阿姆斯特丹、巴塞羅那、都柏林、佛羅倫薩、拉斯維加斯、倫敦、洛杉磯、邁阿密、紐約、巴黎、三藩市、聖約瑟、西雅圖、東京和威尼斯推出。
以上內容來自 [ Google Blog ] blog.google/products/maps/google-maps-immersive-view-routes
