以下是該團隊如何為您帶來許多選擇來偽裝您淩亂的家庭辦公室
最近,你可能已經注意到一位同事在一個發光的、燈籠滿是的市場前開會,或者像一個動畫的月亮一樣出現在一個隨意的聊天中。這些 Google Meet 效果是為了慶祝齋月而創建的,齋月是全世界穆斯林慶祝,禁食,反思和作為一個社區聚集在一起的月份。
這些效果是計劃於 2023 年推出的 Meet 中的各種新場景和背景之一,其中包括更多假日主題和及時的背景和濾鏡,以及一些更新的主食。(還有人在那家光線充足的咖啡店工作嗎?
“當我們在 2018 年開始使用視訊效果時,我們希望為一對一通話增添樂趣和樂趣,” 斯德哥爾摩 Meet Media 團隊負責人 Magnus Flodman 說。他們開始探索將相同的技術從行動裝置帶到其他通過網路視訊通話的實際應用的方法。然後大流行來襲。
“視訊會議的使用呈爆炸式增長,人們需要更多的選擇來為他們的通話添加更多的專業背景,”領導團隊構建效果和處理技術的Dan Gunnarsson說。“因此,我們全力以赴,使其發揮作用。該團隊於 2020 年首次推出了在通話期間模糊背景的功能,隨後是我們今天在通話中享受的更高級的濾鏡和背景效果。
背景背後的技術
Meet 使用 MediaPipe(一種專為直播和流媒體視訊處理而設計的 Google 機器學習框架)識別人與畫面其餘部分之間的分離。MediaPipe 將機器學習和信號處理相結合,分解流的每張靜止圖像,將人物與背景區分開來,讓 Meet 能夠將您的客廳或其他工作區替換為您選擇的背景。
“最大的挑戰是我們必須對每一幀進行背景分離,”Dan 說。“而且我們每秒發送高達 30 幀,因此每幀之間只有幾毫秒的時間來進行計算。這項工作還允許團隊添加 360 度視背訊景。
由於 Meet 完全在網路瀏覽器中運行,所有這些處理變得更加複雜。這樣一來,使用各種設備的使用者就更容易訪問 Meet,但要確保效果和濾鏡流暢且無延遲地運行,這帶來了更嚴峻的技術挑戰,因為他們對系統資源的訪問許可權與本機應用不同。“我們的主要工作之一是通過優化處理方式來確保一切正常,無論是入門級筆記型電腦還是功能最強大的 PC,與 Chrome 和其他幾個網络瀏覽器密切合作,”Dan 說。
效果的藝術
自從引入背景模糊以來,團隊隨著時間的推移不斷擴展選項庫,用更精心策劃的專業會議場景和更引人入勝、更有趣的日常使用濾鏡取代舊的庫存攝影照片。
該團隊與來自世界各地的藝術家合作設計不同的篩檢程式。“我首先為我們全年想做的所有事情制定一個內容策略:我們想要什麼樣的永久背景和哪些永久效果?我們要替換哪些舊內容?我們想參加哪些季節性活動?“Meet 視訊效果的首席設計師 Lauren Morrison 解釋道。“然後我們與藝術家和代理商合作確定設計。
對於文化時刻,團隊經常求助於的 Google 員工資源小組(ERG)。“與真正理解所有象徵性圖像的人合作非常重要,” 勞倫說。“對於今年的齋月影響,我能夠與 Muslims@Google 合作,這是我們 Inter Faith Network ERG 的一個分會 - 他們談到了齋月期間晚上街頭市場的重要性,當時每個人都出去一起開齋。我們想用這種背景來捕捉這種能量。
“無論你把哪個國家稱為家,市場都代表著社區、商業和文化的中心位置,” 領導 Muslims@Google 產品包含團隊的馬利克・埃拉爾比(Malik Elarbi)說,他幫助設計了背景。“每年齋月,這些地方在世界各地都裝飾精美,因為穆斯林在日落時分與朋友,家人和親人聚在一起開齋飯 - 日落後吃的飯菜開齋。
這種合作是勞倫喜歡她的角色的一部分。Lauren 說:“我可以與世界各地非常出色的藝術家合作,製作我們的 Meet 背景和效果,並瞭解世界各地不同地區和假期的圖像,同時讓 Meet 成為一個更具包容性的平臺。很高興能受到所有這些人的啟發。
以上內容來自 [ Google Blog ] blog.google/products/meet/how-google-meet-backgrounds-work