跳到正文
Hugging Face Daily Papers·· 2 天前AI 评分31

TaoMate-FVSR:音频引导的面部视频修复框架

TaoMate-FVSR:Audio-Guided Facial Video Restoration

阅读原文

本站未展示全文,请前往来源网站阅读。

AI 导读

TaoMate-FVSR 是一个音频引导的面部视频修复框架,在参考引导的视频流模型中解决超分后嘴唇与牙齿是否与语音一致的歧义。方法采用源-噪声混合初始化与结构化参考注入,在说话头修复基准上取得最优的成对感知相似度与同步分数。模型还能在音频被替换时支持视觉配音,并恢复场景级 AIGC 视频中的唇形轮廓、牙齿结构与面部纹理。

来源:Hugging Face Daily Papers · arxiv.org