这两天终于把 BaoCut 的视频画面翻译功能做了,这功能技术实现不复杂,但是交互比较麻烦,也没有同类产品借鉴参考,迭代了好几个版本终于觉得还不错了。
亮点是可以 Agent(推荐 Codex)自动化操作,不用人工干预,另外翻译好的结果,可以直接导出到剪映(CapCut)二次处理。
用起来倒是很简单:
一种是自己去 Agent 那边,让 Agent 自己找出来需要翻译的画面帧,然后翻译后把翻译后的文字加到 OCR 出来的位置。
参考提示词:
> 帮我转录翻译 <视频地址>,并为所有全屏的 slides (不是背景中的)也添加翻译
一种是自己从 GUI 主动在要翻译的位置暂停,然后点击播放器下面的 Screen Text 按钮,就能对当前画面进行 OCR,找出来所有文字位置,当然人工可以勾选哪些需要翻译的。
最开始的版本是一次翻译一张,后来发现太慢,现在改成了添加到队列,批量翻译,效率就快多了。
之所以没有做成图片翻译替换画面,是因为视频画面是动态的,如果只是替代一帧或者几帧,效果并不好,就折衷了一下,做成了字幕叠加在原始文字上,人工可以二次调整。
如果你还不是最新版本需要升级到最新版本(v0.8.2)。
下载地址:https://baocut.app/
发布于 美国
