One Shot, One Talk

一槍一談

One Shot One Talk 是一種基於深度學習的影像生成技術。它從單一圖像重建全身動態說話的化身，具有個性化的細節和逼真的動畫，包括身體動作和臉部表情。這項技術大大降低了創造逼真、可移動的虛擬角色的門檻。使用者只需一張圖像即可產生高度個人化且富有表現力的虛擬化身。它由中國科學技術大學和香港理工大學的研究人員開發，結合了先進的圖像到視頻擴散模型和3DGS網格混合頭像表示。關鍵的正則化技術減少了不完美標籤所引起的不一致。

目標受眾

虛擬實境、擴增實境、遊戲開發、社交媒體和娛樂專業人士和愛好者。它提供了一種快速有效的方式來為虛擬主播、虛擬客戶服務、遊戲角色設計等創建個人化虛擬化身。

使用案例

遊戲開發者可以快速產生預告片的動態遊戲角色模型。

社群媒體平台可以為用戶提供個人化的虛擬頭像，以增強用戶互動。

電影製作團隊可以為特效中的電影角色創造逼真的動態模型。

產品特點

單張影像輸入

身體動作和臉部表情的逼真動畫

個性化細節捕捉

自然運動的動態建模

使用預訓練模型產生偽標籤

3DGS 網格混合頭像呈現真實感

提高頭像品質的關鍵正則化技術

跨身分運動重定向

如何使用

1 造訪產品頁面並下載代碼。

2 準備個人影像作為輸入。

3 根據文檔配置環境和參數。

4 使用您的圖像運行程式碼以產生動態頭像。

5 調整動作、表情等參數。

6 儲存並使用頭像。