項(xiàng)目簡(jiǎn)介AniTalker是一個(gè)開(kāi)源項(xiàng)目,它利用靜態(tài)照片和音頻文件來(lái)創(chuàng)造動(dòng)態(tài)的面部說(shuō)話視頻。AniTalker采用了一種通用的運(yùn)動(dòng)表示方法。這種創(chuàng)新的表示方法有效地捕捉了廣泛的面部動(dòng)態(tài),包括微妙的表情和頭部動(dòng)作。AniTalker通過(guò)兩種自監(jiān)督學(xué)習(xí)策略增強(qiáng)了運(yùn)動(dòng)描述:第一種策略是通過(guò)同一身份內(nèi)的源幀重建目標(biāo)視頻幀來(lái)學(xué)習(xí)微妙的運(yùn)動(dòng)表示;第二種策略是使用度量學(xué)習(xí)開(kāi)發(fā)身份編碼器,同時(shí)積極減少身份和運(yùn)動(dòng)編...