11 月 18 日消息，OPPO 在以 “躍遷 · 致善”為主題的未來科技大會 2020(OPPO INNO DAY 2020)上，首次推出 OPPO FDF 全維人像視頻技術(shù)系統(tǒng)。該系統(tǒng)由感知人像和畫質(zhì)增強(qiáng)兩大引擎組成，分別針對人像拍攝時的人物主體和整體畫面進(jìn)行針對性優(yōu)化。據(jù)悉，首款搭載該系統(tǒng)的產(chǎn)品將在 12 月問世。
OPPO 介紹，F(xiàn)DF 全維人像視頻技術(shù)系統(tǒng)由感知人像和畫質(zhì)增強(qiáng)兩大引擎組成，分別針對人像拍攝時的人物主體和整體畫面進(jìn)行針對性優(yōu)化，共同實現(xiàn)人美、景美的拍攝效果，不管是單人還是多人，白天、夜間還是逆光，都可以實現(xiàn)全時段視頻創(chuàng)作自由。
具體來說，感知人像引擎擁有 AI 人臉檢測、AI 超清人像、OFL 膚質(zhì)優(yōu)化算法、人臉畸變矯正等功能，拒絕千篇一律，讓拍攝的作品更自然、真實、動人。
AI 人臉檢測通過對網(wǎng)絡(luò)模型的優(yōu)化，實現(xiàn) 99.78% 的檢測準(zhǔn)確率和 25ms 的單幀檢測耗時，不管是拍視頻還是拍照，都能快速的檢測出人臉區(qū)域，為后續(xù)臉部優(yōu)化圈定精確的范圍。
同時，AI 算法在人臉區(qū)域標(biāo)記了 296 個關(guān)鍵點來實現(xiàn)五官和輪廓細(xì)節(jié)的區(qū)分，并加入關(guān)鍵點是否可見判斷、人臉角度判斷等輔助信息，最終在業(yè)界權(quán)威的 WFLW 數(shù)據(jù)集上實現(xiàn)低至 4.71% 的 NME，這套算法在移動平臺上的運行幀率達(dá)到了 200fps 以上。
AI 超清人像在深度神經(jīng)網(wǎng)絡(luò)模型中設(shè)計了 3 個子模塊對人臉進(jìn)行超分計算、降噪優(yōu)化和銳度優(yōu)化。即使在暗光環(huán)境下，也能通過算法精準(zhǔn)檢測臉部和鄰近區(qū)域并進(jìn)行增強(qiáng)處理。
OFL 膚質(zhì)優(yōu)化算法能分別對膚色和膚質(zhì)進(jìn)行 AI 處理，拍攝時幫助用戶去掉臉部瑕疵、優(yōu)化皮膚表現(xiàn)、讓整體氣色更出眾。這套算法可實現(xiàn) 96.5% 的皮膚區(qū)域的分割，面部皮膚精度達(dá)到了 97.4%。“膚色檢測”范圍不僅包括臉部皮膚，也包括脖子和手部的皮膚，幾乎涵蓋在拍攝人像視頻時會露出的所有皮膚區(qū)域。
OFL 膚質(zhì)優(yōu)化算法還能實現(xiàn) AI 祛瑕疵效果，智能識別區(qū)分天生特征和后天瑕疵的特征，實現(xiàn)更自然地祛瑕疵效果。斑、痘、眼袋等后天瑕疵會被去掉，淚痣等天生臉部特征得到保留。
人臉畸變矯正在處理人臉畸變時，取透視投影中的背景部分，同時對人臉區(qū)域進(jìn)行切割分離、再做一次球面投影，讓人臉保持正常的、符合人眼觀看習(xí)慣的形狀。
畫質(zhì)增強(qiáng)引擎則包含新一代超級防抖算法、移動延時攝影、超級夜景視頻、DOL-HDR 等功能，可在畫面抖動較大、光線不足 / 過亮等場景下保障拍出滿意畫面。
超級防抖算法加入場景檢測過程，通過抓取陀螺儀、加速度計和 Sensor 的數(shù)據(jù)分別對運動軌跡、姿態(tài)和曝光進(jìn)行判斷，從而區(qū)分不同場景，匹配不同的防抖策略。
針對手持移動延時攝影，OPPO 在超級防抖算法中加入運動趨勢判斷，不僅可以使被抽取的多幀畫面之間的過渡更平滑，還可以實現(xiàn)更長時間跨度的防抖，讓移動延時攝影的實拍表現(xiàn)幾乎達(dá)到云臺效果。
超級夜景視頻在前代算法基礎(chǔ)上和 HDR 算法進(jìn)行融合，針對亮度調(diào)整曲線進(jìn)行區(qū)分調(diào)試，算法先會根據(jù)當(dāng)前的亮度環(huán)境智能判斷啟用夜景還是 HDR 亮度調(diào)整曲線，實現(xiàn)更通透、觀感更好的視頻效果。
DOL-HDR 方案解決用戶逆光拍攝痛點，其長短曝光幀幾乎是同時進(jìn)行，大幅縮減了前后幀的間隔時間，大大改善鬼影問題，實現(xiàn)更好的 HDR 視頻拍攝效果。
OPPO 表示，首款搭載 OPPO 人像視頻技術(shù)系統(tǒng)的新品將于 12 月份問世。目前 OPPO 在 HDR、夜景、超級防抖等方面的技術(shù)已經(jīng)陸續(xù)開放給抖音和快手等第三方平臺使用。
關(guān)鍵詞：
