想象一下，你用手機攝制一張照片，然后你不僅可以獲得你攝制時的一個角度，你還可以拖照片來看見有所不同角度的視野變化。這聽得一起是在敘述矮小上的光場視頻，而不是一般來說的2D照片技術，是吧？今年5月，Facebook講解了3D照片技術，今天Facebook月將其3D照片功能帶回了iPhone手機上。當你用iPhone攝制一張照片時，頁面狀態改版編輯器中的新3D照片選項，自由選擇肖像模式照片，然后Facebook會用AI計算出來出有場景深度，使得2D照片也可以動起來，呈現多個角度的景象。這些3D照片可以在在桌面或者手機App中的Facebook動態信息流中體驗到。
當你滑動信息流時，這些照片和普通照片看上去沒區別，而當你頁面轉入照片時，他們馬上突破平面2D的束縛，就像一個小窗口一樣，一下子把你納入3D照片的世界。就像右圖gif一樣，拖照片你可以你看見狗的側面和背后的巖石。
了解到，這個以AI建構出有深度圖像的技術來自于Facebook計算出來攝影部門，描寫這項技術的論文由倫敦大學學院的Peter Hedman和Facebook西雅圖辦公室的研究科學家Johannes Kopf年出版已完成，論文曾在今年8月于溫哥華舉行的Siggraph上展覽。只不過，不少巨頭都在研發計算出來圖像深度的技術，不過目前他們都只是應用于在人像模式中，借以破面背景。然而，Facebook的技術路徑畢竟從VR開始的。Facebook以30億美元并購Oculus后就大力寄托VR，致力于建構一個相連虛擬世界與現實的全新社交帝國，把現實世界放入VR是一項關鍵任務，此前的構建方式主要是360度全景視頻或者是再加3D效果的360度全景視頻，然而，這些全景圖片拼湊出的內容只是2D圖片的大型化，并不具備現實世界的深度感和真實感。
6Dof視頻以及更加完備的光場視頻是大家希望的解決方案，Facebook也仍然在這些領域探尋。在2017年5月的F8大會上，Facebook公布了兩款能記錄深度信息的 3D VR全景照相機，Facebook 360 Surround x24和x6。今年9月，Facebook公布專業級全景照相機 Manifold。
然而，6Dof視頻和光場視頻的制作成本極高，目前VR的發展也無法更有大量的內容制作者，Facebook自由選擇了更加便利更加民主化的路線——3D照片。雖然Facebook發售的這項深度圖像技術被稱作3D視頻，但是卻和大家熟知的3D電影的3D效果不是一碼事。普通的3D只是通過雙目時差構建的偽3D效果，在電影院里，不管你怎么轉身，你看見的立體影像都只有一個角度，而Facebook的3D照片的特點是可以拖查閱有所不同的角度信息。說道了這么多，返回重點，Facebook是如何構建這項技術的呢？據(公眾號：)理解，一開始，Facebook使用的方式是讓用戶以單攝像頭的照相機攝制，通過移動來捕獵整個場景，然后通過分析視差和手機運動，即有所不同距離的物體在照相機移動時移動的數據，可以準確地在修復出有3D場景。
但是，從單個攝像機的較慢圖像中推斷出深度數據是對CPU的計算出來拒絕很高，這種方法在大多數手機都有雙攝像頭時變得有些過時。通過同時用于兩個照相機捕捉圖像，即使對于運動中的物體也可以仔細觀察到視差差異。并且因為兩個鏡頭的設備正處于完全相同的方位，所以深度數據的噪音要大得多，對運算的拒絕也較低很多。
Facebook目前就是使用iPhone的雙攝像頭，手機的兩個攝像頭攝制了一對圖像，設備立刻自行已完成計算出來“深度圖”，圖像編碼幀中所有內容的計算出來距離。結果看上去像這樣：蘋果、三星、華為、谷歌都在研究深度圖像技術，但是目前主要用在照片的背景模糊不清上面。
深度圖的技術難題在于，創立的深度圖沒某種意味著比例。例如，當深紅色意味著100英尺時，淺黃色并不意味著10英尺。每張照片的比例都不完全相同，這意味著你必須攝制多張照片來取得物體實際距離，但是要將這些照片拼湊在一起是一種傷痛。
這就是Kopf和Hedman及其同事所面對的問題。在他們的系統中，用戶通過移動他們的手機攝制他們周圍環境的多個圖像;它每秒捕捉一個圖像（技術上是兩個圖像和一個結果深度圖）并開始將其加到到其子集中。在后臺，算法不會查閱手機運動檢測系統捕捉的照相機的深度圖和微小運動。
然后，深度圖基本上被美容成準確的形狀以與其他照片偏移。創立出有深度圖之后，深度圖不會被切換為3D網格（這個較為抽象化，可以將其想象為一個紙質版本的景觀圖）。然后，檢查網格的顯著邊緣，將這些邊緣斷裂進，例如前景中欄桿遮蓋背景中的景觀，就將兩者分離開了。
這不會將各種物體分隔，使它們看上去正處于有所不同的深度，并隨著投影的變化移動。雖然這些方法建構了3D效果，但是你有可能早已猜中到前景看上去只不過是一個紙質鏤空，因為，如果是必要攝制的人臉，就沒關于他們的頭部或背部。
那么，最后一步就很最重要。通過卷積神經網絡去猜測和填滿圖像的其余部分。例如，如果圖像區域有頭發，那么頭發可能會之后不存在。因此，它可以令人信服地新的建構這些紋理，并估算對象的形狀，增大間隙。
這樣當你略為轉變視角時，你或許知道“環繞”對象看了一圈。Facebook目前能在一秒鐘的時間內已完成深度圖的創立，因此他們將此稱作“即時3D攝影”。
當然，3D照片功能目前不能在有兩個攝像機上用于，亮相這項功能的是iPhone 7+, 8+, X or XS，此后不會有更加多手機重新加入。在論文中，Facebook也辯論了如何用通過另一個卷積神經網絡來使得單攝像頭的照相機也享有某種程度功能。但是，單攝像頭不如雙攝像頭系統好。
這還必須算法和軟件公司的之后希望，正如前些天，曾報導，Google就用單攝像頭構建了打破蘋果雙攝像頭的多項計算出來攝影效果。涉及文章：編撰谷歌近期光場視頻，體驗VR頭顯里的光場世界原創文章，予以許可禁令刊登。
下文聞刊登須知。
本文關鍵詞：華體會體育,用,iPhone,一秒,拍攝,照片,Facebook,這項,技術,厲
本文來源：華體會體育-www.icongrab.com
