本成果是獲得授權發明專利的專利成果(ZL 201310080656.4)。該成果公開了一種語音同步驅動三維人臉口型與面部姿勢動畫的方法,通過用戶輸入新的語音信息,經過預處理之后,在虛擬人的人臉頭像上合成與語音同步的口型動畫和面部姿勢動畫。本發明具體包括兩個階段,在訓練階段,通過KNN和HMM的混合模型實現語音可視化建模;在合成階段,通過用戶輸入新的語音信息,先進行語音信號的特征提取,再經過KNN和HMM混合模型生成與語音信號相對應的人臉面部姿勢和口型幀序列參數,經過平滑處理后,使用Xface軟件合成更加細膩、豐富的三維人臉動畫。本成果不僅具有重要的理論研究價值,而且在可視通信、虛擬會議、游戲娛樂和教學輔助等領域有著廣闊的應用前景。
本成果國內領先。
本成果適用于新一代信息技術領域。