VLC 将使用本地 AI 为视频生成实时字幕,并翻译为 100 多种语言

原始链接在: VLC 将使用本地 AI 为视频生成实时字幕,并翻译为 100 多种语言 - 小众软件

VLC 是著名的跨平台开源视频播放器,最近其全球下载量已经超过了 60 亿次。在正在举行的 CES 2025 上,VLC 展示了具有 AI 字幕和翻译功能的新版本,无需联网,在本地电脑上离线、实时生成。@Appinn


作为一款最早可以追溯到 1996 年的媒体播放器,VLC 历史悠久并且广受欢迎。最初,VLC 被称为VideoLAN Client,主要用来在校园网络内传输视频,2001年,VLC 以开源形式发布,并逐渐发展成为一个功能强大的跨平台多媒体播放器。

VLC Logo 的故事

VLC 的 Logo 是一个橙色交通锥。这是最早的开发者(一群巴黎中央理工学院的学生)在真实世界中收集的交通锥,无论他们如何描述、赋予这个交通锥各种意义,青小蛙始终觉得,这是一个拍脑袋的决定:

对,就是它了,用交通锥当 Logo。

VLC 与 AI 实时字幕

在 VLC 发布的视频中,VLC 使用了开源的 AI 模型,这些模型会根据视频自动生成字幕,同时还有自动翻译为多种语言的功能。并且最重要的是,这一切都是本地运行的,无需联网。

所以,未来的流程,大概就是你下载了一段视频,直接使用 VLC 播放,就会直接、立即出现你所使用的语言字幕。至于你有什么大胆的想法,我觉得以这个视屏来看,一点都不大胆了。

但是

虽然 VLC 说这项功能计划支持 100 多种语言,可以直接在程序内使用,但是 VLC 完全没提什么时候发布。

获取

作为一款开源软件,我觉得有必要把它的官网列出来:

可在绝大多数平台运行(Windows, Linux, Mac OS X, Unix, iOS, Android),完全免费,无间谍软件,无广告,无跟踪用户的行为。


原文:https://www.appinn.com/vlc-ai-subtitling-for-videos/

另外,目前一些手机上带有实时字幕功能,有没有同学尝试下播放本地视频,让它显示并翻译为中文呢?

1 Like

无广告,骗鬼去!据我所知这类‘老牌’就不可能,至少窝用的没有破解的都有,如果是官方承诺没有那也只是付费版,或真没有那些下载渠道也会插入

这话把所有可能都堵死了,也把你作为正常交流的对象这一角色也堵死了。

3 Likes

为什么我看帖子中的图片都是裂的,加载不出来

纯粹的开源软件应该不会这样。加了广告后,到底改了什么大家都看得到

期待类似功能已久了

今天看到酷安用户yrinn说101版本的超级小爱可以实时日语字幕翻译了,现在支持28国字幕,他还贴了一张日语动作大片翻译效果

感觉这两年的翻译工具井喷啊,有不少质量相当不错的,也许得归功于AI?

这一切源自: 神经机器翻译 - 维基百科,自由的百科全书

1 Like

据我所知在potplayer上已有人实现了类似的功能,生成字幕并翻译。但我了解确实不多,在b站推荐视频看到过几次,不知道是不是实时?
mpv由于支持脚本,也有人写了用whisper来语音生成字幕的脚本,另外还有通过powershell模块Console-Translate调用在线api翻译字幕的脚本…2者结合一下,再改改倒也能变成AI生成字幕并翻译

从去年开始,ai的能力进步让我觉得外语学习变得没那么重要,会个基础入门就行,看外文资料语言已经不再是障碍。

但是今天跟朋友聊天,他说考试的英语课本现在变更难了,考试也更难。没有娃,这赛道情况也不了解。

可如果不是为了筛掉更多的考生,基础教育英语为什么要更难呢。

测试版potplayer已实现了自动生成字幕功能,使用的底层是whisper,把语音重头到尾提交给whisper,然后按顺序获得字幕,所以不是实时生成。我使用的是AMD的显卡,无法使用显卡加速,字幕出现得比播放进度要慢,每次都需要暂停一段时间等生成字幕,不知道是不是设置问题还是BUG,在20多分钟以后自动停止了生成,体验不好。

这种东西需要配合那些专门为 AI 优化的硬件才行吧

VLC 可以从这里下载:https://get.videolan.org/