編程客棧（）5月4日 消息:最近，影眸科技與上海科技大學的研發團隊提出了一種文本指導的漸進式3D生成框架——DreamFace，結合了視覺-語言模型、隱式擴散模型和基于物理的材質擴散技術，可以生成符合計算機圖形制作標準的3D資產。
(資料圖)
項目網站:https://sites.google.com/view/dreamface
預印版論文:https://arxiv.org/abs/2304.03117
Web Demo: pythonhttps://hyperhuman.top
HuggingFace Space:https://huggingface.co/spaces/DEEMOSTECH/ChatAvatar
這項技術可以解決基于神經輻射場（NeRF）的3D生成方法與傳統3D渲染軟件的兼容性問題，為javascript3D生成技術的實際應用提供了新的可能性。
DreamFace可以根據文字描述生成3D資產，具有廣泛的應用前景。這項技術可以幫助人們更好地理解和應對合成媒編程bTbUplsk體的問題，提高媒體的可信度和透明度。
DreamFace的創新之處在于其幾何體生成、基于物理的材質擴散生成和動畫能力生成三個模塊。
幾何體生成模塊使用CLIP框架根據文本提示生成幾何模型。
基于物理的材質擴散生成模塊針對預測幾何體和文本提示生成面部紋理。
動畫能力生成模塊使用BlendShapes或生成的Personalized BlendShapes的面部資產具備動畫能力。
DreamFace框架在名人生成、描述生成角色等任務上取得了良好的效果編程客棧，只需5分鐘生成指定3D資產，并且支持使用提示和草圖進行紋理編輯，實現全局編輯效果（如老化、化妝）和局部編輯效果(如紋身、胡須、胎記)，可用于影視、游戲等行業。
營業執照公示信息