把 Mac 变成同声传译机:这款本地运行的实时字幕神器太强了
把 Mac 变成同声传译机:这款本地运行的实时字幕神器太强了
不管是看生肉动漫、SpaceX 直播,还是上国外的网课,语言障碍总是让人头疼。以前我们依赖云端字幕组或者付费翻译服务,但延迟高、隐私风险大,而且还得充会员。
Whicc 在 macOS 上的运行界面示意图。
最近发现了一款开源神器 Whicc,它不仅让你的 Mac 变成一台实时同传机器,而且所有计算都在本地完成。不仅保护隐私,还能充分利用 Apple Silicon 芯片的算力。今天就来聊聊这玩意儿怎么用,以及它背后的技术思路。
为什么 Whicc 值得关注?
市面上大多数实时字幕工具要么依赖云端 API(按量收费,上传语音有隐私泄露风险),要么就是系统自带的语音识别(准确率和翻译质量一言难尽)。
Whicc 的核心思路很简单粗暴:用本地的 GPU 跑大模型,把 Mac 当作一个专用的翻译服务器。
这意味着只要你有设备,哪怕断网也能用。对于手里有 M 系列芯片 Mac 的朋友来说,这算力放着也是放着,不如拿来“卷”字幕。
技术架构:不仅是堆模型,更是拼组合
在 LM Studio 中部署 Hy-MT2 翻译模型的设置界面。
Whicc 并非简单调用一个模型,它在技术上做了不少巧妙的组合,解决了“听懂”和“翻对”两个问题。
1. 听得全:ASR 双模型策略
传统的 Whisper 模型虽然稳,但毕竟是“老”古董了(2024年的技术)。Whicc 做了一个很聪明的混搭:
- 洋文用 Nemotron-3.5:这是今年 6 月的新模型,专门用来识别几十种非中文语言。针对英语、日语等,它的识别率比旧模型更高,适应能力更强。
- 中文用 Qwen3-ASR:Nemotron 的中文识别能力比较拉胯,所以作者集成了通义千问的 Qwen3-ASR 模型。它在处理中文和方言方面表现极佳。
亮点:这种切换是异步且自动的。系统会智能判断当前语言环境,加载对应模型,不会同时占用内存吃死你的电脑。
2. 翻得准:腾讯 Hy-MT2 + 本地部署
识别出来的文字怎么翻译?这里用了腾讯的 Hy-MT2 翻译模型,支持 33 种语言互译。
酷炫玩法(利用闲置算力): 翻译模型是通过 LM Studio 调用的。这就给了我们极大的灵活性。你可以用家里的高性能电脑(哪怕是 Windows)跑 Hy-MT2 模型,而在你的 Mac 上(轻薄本甚至在咖啡店里)只运行 Whicc 前端,通过 LM Studio 的 LM Link 技术连接家里的电脑。
结果就是:你在星巴克用 MacBook Air 看直播,真正干苦力的是书房里的台式机。这叫“云本地化”,不仅速度快,还不消耗本地 MacBook 的电池。
3. 上下文感知:不再是死板翻译
大模型翻译最大的坑是把专有名词译错(比如人名、游戏术语)。Whicc 引入了 Hermes Agent 的能力。
当你告诉 Hermes:“我在看阿根廷 VS 埃及的世界杯直播”,它会自动联网搜索这场比赛球员的名字、背景信息,生成一个临时的“术语库”喂给翻译模型。这样原本可能被乱译的人名,就能精准对应了。
4. 技术栈:SwiftUI + Python
虽然底层跑着 Python 模型,但作者把它打包成了原生的 macOS APP(SwiftUI)。这对用户非常友好,不用去折腾 Python 环境变量、虚拟环境这些麻烦事,下载安装包就能跑。
工作流也很清晰:
系统音频/麦克风 → MLX 框架进行 ASR 识别 → Python 脚本流式翻译 → SwiftUI 界面显示
快速上手指南
想尝鲜的朋友,需要准备以下环境:
- 硬件:一台 Apple Silicon 的 Mac(M1/M2/M3 等)
- 模型下载:需要一个能访问 Hugging Face 的网络环境。应用设置页内置了下载器,大概需要下载 2GB 左右的 ASR 模型。
- 部署翻译服务:下载并安装 LM Studio,然后在里面搜索并加载 Hy-MT2 模型。
配置完成后,无论是系统播放的声音(如看 Netflix),还是麦克风收音(如开会),Whicc 都能把声音“听”进去,然后吐出双语字幕。
一些思考:软件的“护城河”在哪里?
开发者有一个观点我也非常认同:大厂在卷模型能力,应用开发者只需要负责适配。
以前开发软件,算法是瓶颈;现在开发 AI 软件,瓶颈变成了如何优雅地调用不断进化的模型。Whicc 采用了类似“Prompt Dock”的模板化思路——底层模型换了(比如明年出了 Nemotron-4.0),Whicc 只需要更新接口,你的字幕体验就会自动升级。
当然,本地方案也不是完美的。大模型偶尔会“胡说八道”(比如把人名翻译错),噪声大时识别率会下降。但对于看视频、听课这种场景来说,有字幕比没字幕强,错一点点并不影响理解大局。
如果你手里有一台吃灰的 Mac,或者讨厌云端订阅的“刺客行为”,Whicc 绝对是目前最极客、最值得折腾的解决方案之一。

评论已关闭