阿里刚刚开源了一款能处理复杂电影场景的多模态电影配音AI模型:Fun-CineForge,给电影自动生成配音
从效果上看,感觉音质、口型同步、音色转换上都不错
它不是简单的文字转语音,而是具备视频理解+角色识别能力的配音
该模型具备时间模态能力,给AI加上了时间感,它能知道谁在什么时候说话,解决了多人同时说话或快速切换说话者的对齐问题
支持多角色对话,能在多个角色声音间自然切换,类似真人配音演员分饰多角的效果
可以用于独白、旁白、对话、多人说话等等多种电影场景
电影/电视剧/短视频,想给视频配音的可以看看
github:http://t.cn/AXfPuF9j
HF:http://t.cn/AXfPuF9Y
#AI配音模型##AI配音##Fun-CineForge##阿里AI配音模型#
发布于 山西
