FaceLift：単一の顔画像から忠実度の高い3D頭部モデルを生成する革新的なツール

FaceLiftは、1枚の顔画像から高品質な360度3D頭部モデルを迅速に生成するために設計された革新的なツールです。このツールは、フィードフォワードアプローチを使用して、マルチビューの潜在拡散モデルから一貫性のある側頭部と後頭部のビューを生成し、GS-LRM再構成器を使用して完全な3D表現を生成します。FaceLiftは、合成データのみで学習した場合でも、実世界の画像で優れた性能を発揮し、ビデオ入力からの4Dニュービュー合成をサポートし、3Dフェイシャルアニメーションのための2Dリアニメーション技術とシームレスに統合します。

主な特徴

• 単一画像の3D再構成1枚の顔画像から忠実度の高い3D頭部モデルを生成し、顔や髪のディテールを正確に捉えます。
• マルチビュー生成マルチビューのポテンシャル拡散モデルを利用して、1つの顔入力から側頭部と後頭部のビューを生成し、マルチビューの一貫性を確保する。
• GS-LRMリコンストラクションGS-LRM再構成器は、生成された多視点画像を3次元ガウス表現に変換し、頭部全体の新たな視点合成を可能にします。
• ビデオ入力処理ビデオ入力をサポートし、各フレームを処理して4Dニュービュー合成用の3Dガウスシーケンスを生成します。
• 3Dフェイシャル・アニメーションLivePortraitのような2Dフェイシャルアニメーションと組み合わせることで、3Dフェイシャルアニメーション効果を得ることができます。

使い方：

1. フェイスリフトのウェブサイトへFaceLiftの公式ウェブサイトをご覧ください。
2. 入場の準備入力素材として顔画像や動画を用意する。
3. フェイスリフトを実行FaceLift ツールを実行し、ウェブサイトに記載されているガイドラインに従って、3D 頭部モデルまたは 4D 新しいビュー合成を作成します。
4. プレビューとエクスポート必要に応じて、結果を見たり、3Dモデルやアニメーションをエクスポートすることができます。

FaceLiftの革新的なアプローチにより、ユーザーは1枚の顔画像やビデオから高品質な3D頭部モデルを素早く生成することができ、3D再構成やアニメーションに新たな可能性をもたらします。