Wrap4D + Track

描述

Wrap4D 

擴展版本的Wrap，專為4D處理而設計。它將一系列帶有紋理的3D掃描作為輸入，然後產生一系列具有一致拓撲的網格作為輸出。

使用頭盔上的兩個相機進行4D捕捉

以往要捕捉高保真度的面部動畫，通常需要使用4D捕捉設備。而新的圖像面部綁定工具提供了高保真度的面部動畫。 

現在您只要透過安裝在頭盔上的兩個相機來處理4D序列，就可以在進行身體動態捕捉（mocap）的同時捕捉面部表演。

WRAP4D 和 TRACK

4D 處理盡在您的手中

我們展示了 4 個專門為處理 4D 序列而設計的新應用程式。許多工作室都使用 4D 表演捕捉，因為它可以捕捉演員臉部每一毫米的動作。

Faceform Wrap4D、Faceform Track、Faceform Rush和Faceform Node提供了一種簡單、高效且可控的方式來處理公司中的 4D 序列。

功能介紹

Wrap4D 的新功能

• 立體攝影機效準
  利用方格棋盤序列來校準頭戴攝影機上的兩個攝影機。
• 圖像面部綁定
  通過優化形狀、紋理和燈光，將網格與頭戴攝影機序列的每一幀相合，直到與相機拍攝的影像吻合。
• 可引導的頭部穩定
  使用一組預穩定的FACS (面部表情辨識系統)表情，穩定HMC序列上的頭部。
• 可引導的更換
  透過分析臉的前部預測頸部、耳朵、和頭部兩側的形狀。 
• 可引導的紋理
  基於透過攝影測量裝置的一組紋理 FACS 掃描，為HMC序列的每個畫面產生動態色彩紋理。
• 可引導的平滑變形器
  使用一組高解析度 FACS 樣本提高 4D 序列的分辨率。
• 可引導的網格
  透過使用一組預先對齊好的牙齒範例的FACS來預測每一幀的下牙位置。
• 眼球方向的匹配
  透過將眼球與相機影像進行逐像素匹配，找到序列中每個畫面的眼球旋轉情況。
• 插值眼睛
  透過在眼球可見的幀之間插值旋轉來預測每一幀在眼臉閉合時注視的方向。

Faceform Wrap4D 

Wrap4D 是 Wrap 的擴展版本，專為 4D 處理而設計。它採用一系列紋理 3D 掃描作為輸入，並產生一系列具有一致拓撲的網格作為輸出。

該解決方案包括 12 個新節點。此管道的核心是FacialWrapping節點，它將BlendWrapping節點的功能與唇部和眼瞼偵測器的結果結合。這個節點背後的想法是提供不需要清理的穩健結果。    

Faceform Track

Track 是用來追蹤標記和偵測臉部特徵的獨立軟體。它將所有勞動密集型工作帶入 2D 空間，這樣您就不必清理 3D 模型。

表演期間皮膚的外觀可能會發生巨大變化。透過使用追蹤標記，甚至可以包裝非常極端的表達式。Faceform Track提供通用和個人化的偵測器來追蹤嘴唇和眼瞼輪廓。您可以透過提供個人化偵測器一組手動註解的框架來訓練它，以達到極高的準確度。

Faceform Rush

每個幀可能需要幾分鐘的計算。處理 4D 序列時，您有數千幀，這可能需要數週時間。

Faceform Rush 只需點擊幾下即可在數十台機器上運行計算。您可以透過一個易於使用的介面停止、暫停、追蹤進度以及將不同的項目分配給不同的機器。

它與Faceform Node結合使用，後者是一個無頭運算節點，因此您無需為每台機器購買Faceform Wrap4D授權。  

平行處理

使用 Faceform Wrap4D，您可以獨立計算序列的任何幀，這意味著整個序列可以在多台機器上並行計算。

完全控制

包裝管道被分成清晰的可控步驟。您可以輕鬆檢查並更正每一步的結果，然後再進行下一步。

2D 工作流程

借助 Faceform Track，所有勞動密集型工作（例如追蹤標記和檢測輪廓）都是在 2D 中完成的，因此您無需清理 3D 模型。

靈活性

不同的項目有不同的要求和不同的掃描能力。您可以自由使用適合您需求的拓撲，調整管道以處理丟失的數據和噪聲掃描，添加註釋幀以提供更準確的嘴唇和眼瞼跟踪，並擴展訓練混合形狀集以提高包裹質量。

處理大旋轉

由於 Faceform Wrap4D 直接與 3D 掃描配合使用，因此它可以處理較大的頭部旋轉，從而為演員提供更多的行動自由度。使用預穩定步驟，管道的其餘部分就像演員的頭部位置是靜態的一樣工作。

可擴展性

透過 Faceform Rush 和 Faceform Node，您可以輕鬆地將計算擴展到數十台機器，以滿足您的截止日期。

加購產品

Faceform Node

系統需求

• 作業系統：
  Windows7/ 8/ 9/ 10/ 11 (64位元)
  Linux
• 顯示卡：OpenGL 2.1或以上