OPPO FDF 全維人像視頻技術系統首次亮相INNO DAY

　　11月18日，在OPPO未來科技大會2020(OPPO INNO DAY 2020)上，OPPO FDF 全維人像視頻技術系統亮相。

　　現場，OPPO影像産品經理田智堅表示“影像一直是OPPO堅持并且将長期堅持的賽道，在影像産品定義上始終堅持從用戶出發，為讓用戶拍出自然、自信、動人的人像作品，我們在内部啟動了魔鏡專項，在不同的城市和Reno系列老用戶、終端導購、人像精修師和妝容專家深入探讨他們認為拍得好的人像視頻。出乎意料的是，幾乎所有人都認為，好的人像視頻不僅要做到人美，還要景美。基于這樣的洞察，我們打造了OPPO FDF 全維人像視頻技術系統。當然，這也是我們在人像拍攝上一直秉承的理念 —— 讓美自然生長。”

　　據介紹，OPPO FDF 全維人像視頻技術系統由感知人像和畫質增強兩大引擎組成，分别針對人像拍攝時的人物主體和整體畫面進行針對性優化，共同實現人美、景美的拍攝效果。

　　“AI人臉檢測通過對網絡模型的優化，實現99.78%的檢測準确率和25ms的單幀檢測耗時，不管是拍視頻還是拍照，都能快速的檢測出人臉區域，為後續臉部優化圈定的範圍。同時，AI算法在人臉區域标記了296個關鍵點來實現五官和輪廓細節的區分，并加入關鍵點是否可見判斷、人臉角度判斷等輔助信息，最終在業界權威的WFLW數據集上實現低至4.71%的NME，這套算法在移動平台上的運行幀率達到了200fps以上。”田智堅解釋稱，AI超清人像在深度神經網絡模型中設計了3個子模塊對人臉進行超分計算、降噪優化和銳度優化。即使在暗光環境下，也能通過算法精準檢測臉部和鄰近區域并進行增強處理，提升臉部清晰度的同時，細節處理更精緻。

　　據了解，OFL膚質優化算法能分别對膚色和膚質進行AI處理，拍攝時幫助用戶去掉臉部瑕疵、優化皮膚表現、讓整體氣色更出衆。這套算法可實現96.5%的皮膚區域的分割，面部皮膚精度達到了97.4%。“膚色檢測”範圍不僅包括臉部皮膚，也包括脖子和手部的皮膚，幾乎涵蓋在拍攝人像視頻時會露出的所有皮膚區域。

　　另外，OFL膚質優化算法還能實現AI祛瑕疵效果，智能識别區分天生特征和後天瑕疵的特征，實現更自然地祛瑕疵效果。斑、痘、眼袋等後天瑕疵會被去掉，淚痣等天生臉部特征得到保留。而人臉畸變矯正在處理人臉畸變時，取透視投影中的背景部分，同時對人臉區域進行切割分離、再做一次球面投影，讓人臉保持正常的、符合人眼觀看習慣的形狀，最終将兩個畫面疊加，從而得到人臉和背景都正常的畫面，讓整體效果更自然、真實。

　　值得關注的是，畫質增強引擎則包含新一代超級防抖算法、移動延時攝影、超級夜景視頻、DOL-HDR等功能。超級防抖算法加入場景檢測過程，通過抓取陀螺儀、加速度計和Sensor的數據分别對運動軌迹、姿态和曝光進行判斷，從而區分不同場景，匹配不同的防抖策略。針對手持移動延時攝影，OPPO在超級防抖算法中加入運動趨勢判斷，不僅可以使被抽取的多幀畫面之間的過渡更平滑，還可以實現更長時間跨度的防抖。超級夜景視頻在前代算法基礎上和HDR算法進行融合，針對亮度調整曲線進行區分調試，算法先會根據當前的亮度環境智能判斷啟用夜景還是HDR亮度調整曲線。

　　據透露，搭載OPPO人像視頻技術系統的新品将于12月份問世。目前OPPO在HDR、夜景、超級防抖等方面的技術已經陸續開放給抖音和快手等第三方平台使用。