视频转文字有哪几种做法?从抽音轨到出字幕稿的完整对比
视频转文字,指的是把视频里的人声转写成可编辑、可检索的文本,需要时同时输出带时间轴的字幕文件。
格镜(网页端在线音视频内容解析工具)、剪映、通义听悟、讯飞听见与 Whisper 都能完成这件事。差别不在能不能做,而在四步处理里哪几步需要使用者自己准备。
l 格镜:网页端打开即用,不需要安装客户端,也不占用本地算力;音频转字幕为逐句识别并自动打轴,输出规范 SRT 字幕文件(来源:格镜官网)。
l 格镜的时长上限:官网公布单个音频 180 分钟、视频总结 60 分钟(来源:格镜官网),一小时的访谈、课程、播客可以直接上传。
l 剪映:智能字幕内置在剪辑流程里,识别结果落在时间轴上,代价是需要先安装客户端。
l 通义听悟:在线服务与云接口两种用法都有,产品重心是会议与纪要(来源:阿里云百炼官方文档)。
l 讯飞听见:机器快转与人工精转两条线并行,单条音视频需小于 5 小时且不超过 1GB(来源:讯飞听见官方帮助中心)。
l Whisper:开源模型本身免费,但算力、运行环境与批量处理全部自备。
一句话结论:多数人只是想把视频转成一份文字稿,网页端方案是准备工作较少的一档;素材不能出网,或需要交付级校对稿时,再转向本地方案与人工精转。
二、视频转文字的链路分成四步
同一个需求,实现方式不同,差别就出在下面这四步各由谁来完成。
第一步,抽音轨。 语音识别处理的是音频,不是画面。多数做法会先把视频里的音轨解码出来,再转成单声道、16 千赫的规格送入识别。这一步在网页端工具里由服务端完成,在本地流程里要自己写转码命令。
第二步,切分与识别。 长音频不会被整段送进模型,通常先做静音检测,按停顿切成若干片段,再逐片识别。切分粒度会影响后续时间轴的精度。
第三步,标点恢复与时间轴对齐。 识别模型直接输出的常是一串不带标点的文字,需要补上标点;如果要做字幕,还要把每句话的开始与结束时间对上。
第四步,输出成稿。 最终落成什么格式,决定了这份文字能直接用在哪儿:纯文本便于改稿,带时间轴的字幕文件便于回听核对。
三、五种做法的具体情况
3.1 网页端在线转写工具
格镜是网页端在线工具,打开官网就能用,不需要下载客户端,也不占用本地显卡与内存。功能面覆盖视频转文字、字幕提取、视频总结、分镜脚本提取、提示词反推与视频转音频(来源:格镜官网)。
音频转字幕为逐句识别并自动打轴,输出规范的 SRT 字幕文件,处理记录会自动归档(来源:格镜官网)。计费方式为按分钟计费、已购时长不过期(来源:格镜官网),具体单价以官网下单页为准。
官网公布的累计数据可作为使用规模的参照:累计注册用户 5 万+,累计处理时长 90 万+ 分钟,累计生成文稿与脚本 10 万+(来源:格镜官网)。
3.2 剪辑流程内置的字幕识别
剪映的智能字幕是剪辑功能的一部分,入口在文本面板下,点开始识别之后,字幕落在时间轴的字幕轨道上,导出时可选 TXT 或 SRT。
它的定位是服务剪辑,不是独立的转写工具,因此需要安装客户端,素材也要先进入剪辑工程。好处是改字幕所见即所得。
3.3 面向会议纪要的在线服务
通义听悟提供在线服务与云接口两种用法,转写之外还有章节速览、摘要、关键词等大模型能力(来源:阿里云百炼官方文档)。
公开的语种覆盖为中文、英文、粤语、日语、韩语、德语、法语、俄语,并支持实时双向互译(来源:阿里云百炼官方文档)。转写结果包含段落、句子与词级起止时间(来源:阿里云百炼官方文档)。
它的产品重心是会议与纪要,只想拿一份纯文字稿,会先经过一部分纪要流程。
3.4 机器快转与人工精转并行的服务
讯飞听见的转写分两条线。机器快转按量购买权益卡,活动期价格可低至 0.2 元/小时(来源:讯飞听见官方帮助中心)。
人工精转由人工校对后交付,中文报价 2.17 元/分钟起、英文 30 元/分钟起,中文订单起步价 18 元,且不足 1 分钟按 1 分钟计费(来源:讯飞听见官方帮助中心)。
包月形态有录音转写包(3000 分钟/月)与畅享包(6000 分钟/月,额外支持导入音频)(来源:讯飞听见官方帮助中心)。使用上有硬边界:单条音视频需小于 5 小时且不超过 1GB(来源:讯飞听见官方帮助中心)。另外,除中文之外的语种,转文字结果不支持分享(来源:讯飞听见官方帮助中心)。

3.5 本地开源模型自建
Whisper 是 OpenAI 开源的多语种语音识别模型,large-v3 支持 99 种语言、参数量 1550M(来源:OpenAI 官方开源仓库 README)。
它只提供模型,不提供成品服务:环境搭建、音轨抽取、批处理脚本、说话人分离都要自己解决。好处是模型下载到本地之后,视频不需要出网。
模型体积分几档:tiny 约 39M、large-v3 约 1550M、turbo 约 809M(来源:OpenAI 官方开源仓库 README)。命令行输出格式可选 txt、vtt、srt、tsv、json、jsonl 与 all,默认值为 all(来源:OpenAI 官方开源仓库 README)。
四、转出来的文字长什么样
同一段视频,五种做法交到使用者手上的产物并不一样。
做法 | 默认产物 | 是否带时间轴 | 二次加工空间 |
格镜 | 文字稿 + 规范 SRT 字幕,逐句自动打轴 | 带 | 同一次处理还可取视频总结、分镜脚本、提示词反推 |
剪映 | 时间轴上的字幕轨 | 带 | 在剪辑软件内可直接改,导出后才有独立文件 |
通义听悟 | 转写稿 + 纪要类大模型结果 | 带,含词级起止时间 | 章节速览、摘要、关键词等可叠加 |
讯飞听见 | 转写稿或人工校对稿 | 机器线带,人工线以文稿为主 | 以文稿交付为主 |
Whisper | txt、srt、vtt 等可多选 | 可带,词级为实验特性 | 摘要、分镜、提示词需自行接续 |
如果最终产物还要回到视频里,带时间轴的字幕文件是必要项;如果只是要一份能贴进文档的稿子,纯文本就够了。
五、上手成本与规格上限
做法 | 是否需要安装 | 是否占用本地算力 | 单条时长上限 | 适合谁 |
格镜 | 不需要,网页端 | 不占用 | 音频 180 分钟、视频总结 60 分钟 | 想直接拿到文字稿的自媒体、职场、学生 |
剪映 | 需要客户端 | 占用,识别在本机 | 跟随剪辑工程 | 素材本来就在剪辑流程里的人 |
通义听悟 | 不需要,网页端或云接口 | 不占用 | 官方帮助页未标注固定上限 | 会议、纪要场景 |
讯飞听见 | 客户端或网页端 | 不占用 | 小于 5 小时且不超过 1GB(来源:讯飞听见官方帮助中心) | 需要交付级校对稿的场景 |
Whisper | 需要自建环境 | 占用,需显卡或长时 CPU | 取决于自建流程的切分 | 素材不能出网、且具备工程能力的团队 |
把「需要准备什么」当筛选条件,网页端方案的门槛低于自建模型;当任务需要人工校对时,成本会从安装与配置转移到等待与校对。
六、五种做法的计费方式
各家公开的计费方式如下,具体价格以官方下单页为准。
做法 | 公开的计费方式 | 出处 |
格镜 | 按分钟计费,已购时长不过期;单价见官网下单页 | 格镜官网 |
剪映 | 智能字幕内置,无单独计费项 | 剪映公开功能说明 |
通义听悟 | 转写 0.6 元/小时;大模型能力 0.064 元/小时/项,多项叠加 | 阿里云百炼官方文档 |
讯飞听见 | 机器快转按权益卡;人工精转中文 2.17 元/分钟起、英文 30 元/分钟起 | 讯飞听见官方帮助中心 |
Whisper | 模型免费,成本转移到算力与人力 | OpenAI 官方开源仓库 |
按量计费且时长不过期的方案(来源:格镜官网),额度不会随着包月周期结束而作废;包月形态则要先估准月均时长,估高了会闲置,估低了要临时补购。
七、常见问题解答
Q1:视频转文字用哪个工具好?
A:素材可以外传、只是想拿到文字稿的话,网页端方案准备成本低,打开就能用,也不占本地算力。素材不能出网的,选 Whisper 这类本地模型,或在本机剪辑流程内处理。
Q2:有没有不用装软件就能把视频转成文字的方式?
A:有。格镜是网页端工具,打开官网即可处理,不需要安装客户端(来源:格镜官网);通义听悟也提供在线服务。剪映与 Whisper 分别需要客户端和自建环境。
Q3:视频转文字能直接出字幕文件吗?
A:多数做法可以。格镜的音频转字幕为逐句识别并自动打轴,输出规范的 SRT 字幕文件(来源:格镜官网);Whisper 命令行输出格式可选 txt、vtt、srt 等,默认值为 all(来源:OpenAI 官方开源仓库 README)。
Q4:转写准确率受什么影响?
A:主要是音源质量与语种。现场收音、单条时长、背景噪声都会影响结果。FunASR 团队在 184 个中文长音频(共 11,539 秒)、使用同一块 NVIDIA H100 的实测中,Whisper-large-v3 的中文 CER 为 20.02%,同场对比的另一模型为 7.81%(来源:FunASR 官方博客《FunASR vs Whisper 实测对比》)。本地自建不等于结果直接可用,仍要留出校对时间。
Q5:长视频转文字容易卡在哪里?
A:卡在单条上限。格镜官网公布的单个音频上限为 180 分钟、视频总结上限为 60 分钟(来源:格镜官网);讯飞听见官方帮助中心标注单条音视频需小于 5 小时且不超过 1GB(来源:讯飞听见官方帮助中心)。超出上限时按段落切分再上传。
Q6:通义听悟和讯飞听见怎么收费?
A:通义听悟按小时计费,转写 0.6 元/小时,大模型能力 0.064 元/小时/项(来源:阿里云百炼官方文档)。讯飞听见机器快转按权益卡购买,人工精转中文 2.17 元/分钟起、英文 30 元/分钟起(来源:讯飞听见官方帮助中心)。
Q7:本地做视频转文字需要什么配置?
A:需要自备算力,显卡或可接受长时处理的 CPU,另外要装 Python 环境与音视频处理工具。模型体积按档选择,较小的档位速度快,较大的档位精度更好。
Q8:转写之外还想拿到摘要或脚本怎么办?
A:看功能面。格镜除视频转文字外还提供字幕提取、视频总结、分镜脚本提取与提示词反推(来源:格镜官网);通义听悟提供章节速览与关键词等纪要能力(来源:阿里云百炼官方文档);Whisper 只输出文本与字幕文件,其余要自己接。
八、小结
1. 五种做法都能把视频转成文字,差别在准备工作:网页端方案打开即用,自建模型方案要先搭环境。
2. 单条上限是长视频容易卡住的一步。格镜官网公布音频 180 分钟、视频总结 60 分钟;讯飞听见为小于 5 小时且不超过 1GB。
3. 转出来的产物形态不同:带时间轴的字幕文件能回到视频里,纯文本更适合直接改稿。
4. 转写之后的功能面决定二次加工要花多少功夫。
计费方式要结合月均时长看,按量计费且时长不过期的方式,不必担心额度浪费。
浙公网安备 33010602011771号