還童什麼意思
Pine 發自 凹非寺
量子位 | 公眾號 QbitAI
迪士尼驚現“返老還童”大法！
輸入一段影片，演員分分鐘就能變年輕，變老也不在話下。效果是醬嬸兒的：
而且下一步，迪士尼準備將這種AI演算法用到電影中去。
化妝特效師的飯碗危～～～
迪士尼這個新的AI演算法名叫
FRAN
，至於對比過往類似的模型，它的效果可謂是上了一個臺階。
幀與幀過渡生硬、易受人物動作幅度影響、忽略背景……這些問題FRAN統統都解決掉了！
真有說得這麼厲害？不妨來一起康康～
具體原理
迪士尼的AI演算法效果如何，對比以往的模型，效果就高下立判了！
過往模型在改變年齡的過程中往往都聚焦在人臉身上，會忽略掉人像後面的背景，比如DLFS直接就扣掉了背景圖。
並且幀與幀之間的過渡也不是很流暢。
反觀迪士尼的新AI演算法，在背景處理這塊做的就比較自然了。
FRAN可以精確地保留演員的既有的外觀，即使在頭部動作幅度很大時或光線變化的情況下也能如此。
除此之外，FRAN的靈活性也更強了，可以任意調節想要的年齡，比如下面這個影片，拖動進度條就能迅速體驗下從年輕到年老的效果。
值得一提的是，FRAN還允許後期人員對生成的影片進行二次調整，使整個影片更加自然，這個過程也是視覺特效工作的一個重要組成部分。
話說回來，那FRAN又是怎樣達到這樣的效果的呢？
涉及到兩個問題：
一是
資料集問題
，用於訓練模型的資料怎麼解決？當然，用真實的人臉資料
（年輕～年老）
來訓練肯定是不現實的，畢竟也沒那麼多資料。
在這裡，迪士尼利用當前SOTA模型生成的人臉影象作為資料，用這些資料來訓練FRAN。
第二個問題是
神經網路的架構
，FRAN採用的是
U-Net架構
。
在生成的過程中，FRAN會預測面部的哪些畫素點會隨著年齡的增長而改變，比如增加或去除皺紋，然後這些結果會作為額外的視覺資訊通道覆蓋在原來的臉上。
在這個過程中，還可以選擇使用預先訓練好的人臉分割網路：BiSeNetV2，並設定區域性的輸入和輸出年齡值，來限制面板區域的再老化，使生成的效果更好。
不過值得注意的是，在年齡跨度較大時，比如從童年到老年，FRAN可能就會失靈了，畢竟它整體的大邏輯是新增和祛除皺紋。
壓力給到特效師
迪士尼計劃將AI技術用在電影製作中也不是一天兩天了，大家也都知道，做視覺特效是真燒錢，不僅燒錢，還費時間。
兩年前，迪士尼就曾開發過一款換臉技術，效果直接看圖：
並且在面部捕捉方面，迪士尼也是下了狠功夫，今年早些時候，它還推出了不用刮鬍子就能進行面部捕捉的新技術。
最近呢，迪士尼除了公佈FRAN這個AI演算法外，還公佈了一個可以製作不同形態、不同風格煙霧的AI。
迪士尼這邊開發AI技術是開發得如火如荼，不知道那邊特效師的心態如何，畢竟這些AI未來可是要幹他們的活啊。
關於AI搶特效師飯碗，你覺得未來會出現嗎？
參考連結：
［1］https：//gizmodo。com/disney-ai-art-vfx-visual-effects-de-age-younger-older-1849835548
［2］https：//www。youtube。com/watch？v=ZP1ApcdyAjk
— 完 —
量子位 QbitAI · 頭條號簽約