Simon的白日梦
24-12-31 12:11 微博认证:科技博主

大家都在生成视频还有语音,总要有人帮生成音效吧?🥹

今年最被低估的AI模型之一,重现李小龙功夫音

🧐 MMAudio是一个全新的AI音频生成工具,可以自动为视频生成环境音效和动作音效,为AIGC领域视听同步生成的难题带来了突破性进展。

➡️code:http://t.cn/A6mTRlMj

Demo:http://t.cn/A6uqsb3Y

拓展阅读:http://t.cn/A6uqsb3l

✨重点

● 🎥 工具简介:MMAudio由伊利诺伊大学和索尼联合开发,能够基于视频内容自动生成合适的音效,包括背景音(如风声、鸟鸣)和动作音(如碰撞声、武术动作声)。

● 🔊 音效实例:

经典场景重现:为《闪灵》等经典电影片段补充逼真的音效。

动态音效匹配:精确重现李小龙的功夫音及双节棍的声音同步效果。

普通视频增强:对原有音频较差的视频添加符合语义和时间的高质量音效,如旅行记录、日常生活片段等。

● 🚀 技术亮点:生成一个8秒音频仅需1.23秒,多模态联合训练未影响其单模态任务表现,甚至可以生成背景音乐和人声。

● 🌟 实际应用:适用于内容创作者、短视频制作人和影视后期团队,为视频提供更生动的表现力,显著提升观众体验。

✨ 总结:MMAudio为AI视频生成注入了重要的声音元素,不仅让视听同步生成成为可能,还降低了视频音效制作的门槛,是AIGC领域的一大进步。

#AI白日梦想家[超话]# #ai创造营# #你好人工智能时代#

发布于 广西