FFmpeg添加字幕的详细操作

news/2024/11/29 8:35:38/

FFmpeg添加字幕的详细操作

在视频中添加字幕可以使视频更具可读性，并为观众提供更好的观看体验，这在多语种内容中尤为重要。FFmpeg是一个流行的开源视频处理工具，它可以被用来给视频添加字幕。本文将介绍FFmpeg集成libass的编译流程，介绍SRT和ASS字幕格式及其参数，如何使用FFmpeg向视频添加硬字幕和软字幕，并通过示例演示如何生成单一字幕和多项字幕。

而本文最后实现的效果为：默认中英文字幕，可选英文字幕的软字幕的实现：
中英多通道字幕

1. 硬字幕和软字幕的简介

1.1. 硬字幕

将字幕渲染到视频的纹理上，然后将其编码成独立于视频格式的一个完整的视频。硬字幕不能更改或删除，因为它们与视频（通道）是一个整体。

1.2. 软字幕

在播放视频时实时渲染和读取。软字幕可以在播放过程中随时添加或删除。软字幕比硬字幕更加灵活，因为它们可以随时进行修改，但它们也需要高性能的播放器支持。

软字幕单独生成一个字幕通道，与视频
、音频一样，如以下Stream #0:2：

  Stream #0:0[0x1](und): Video: h264 (High) (avc1 / 0x31637661), yuv420p(progressive), 852x480, 397 kb/s, 25 fps, 25 tbr, 12800 tbn (default)Metadata:handler_name    : VideoHandlervendor_id       : [0][0][0][0]Stream #0:1[0x2](und): Audio: aac (LC) (mp4a / 0x6134706D), 48000 Hz, stereo, fltp, 127 kb/s (default)Metadata:handler_name    : SoundHandlervendor_id       : [0][0][0][0]Stream #0:2[0x3](eng): Subtitle: mov_text (tx3g / 0x67337874), 0 kb/s (default)Metadata:handler_name    : SubtitleHandler

2. SRT和ASS字幕格式的简介

2.1. SRT（SubRip Subtitle）

是一种简单的字幕格式，主要由时间戳和文本组成。它通常用于简单的字幕文件，如电影聚会之类。SRT字幕格式的参数如下：

  • 标题的计数器/索引
  • START和END：字幕开始和字幕结束的时间戳，格式为 “小时：分钟：毫秒”。
  • TEXT：在此时间戳范围内显示的字幕文本
  • 一行空白表示一个结束
1
00:00:0,000 --> 00:00:2,000
这是0到2秒显示的字幕2
00:00:2,000 --> 00:00:4,000 
这是2到4秒显示的字幕3
00:00:4,000 --> 00:00:7,000
这是4到7秒显示的字幕

2.2. ASS（Advanced SubStation Alpha）

是一个高级的字幕格式，它可以支持更多的样式和控制，比如，更改颜色、字体和大小，还可以通过几何变换来控制字幕的位置。ASS字幕格式包含以下参数：

2.2.1. 样式:

Style: 序号, 字体名称, 字号, 颜色, 阴影, 边框, 描边, 阴影, 抗锯齿, 倾斜度, weight, underline
例子：Style: Top, Microsoft YaHei,40,&H00F5FF&,-1,2,0,0,1,0,0

2.2.2. 对齐:

Dialogue: 0,0:00:03.42,0:00:04.91,Top,,0,0,0,,{\an6}本字幕居右上

其中\an6表示右上角对齐，默认是左下角对齐。

2.2.3. 触发器:

Dialogue: 0,0:00:03.42,0:00:04.91,Top,,0,0,0,,{\t(0,300,\fade(400,400))}三秒内渐入渐出

其中\fade(400,400)表示透明度从0渐变到400再从400渐变到0。

2.2.4. 动画:

Dialogue: 0,0:00:03.42,0:00:04.91,Top,,0,0,0,,{\move(0,0,100,100)}右下角移动

其中\move(0,0,100,100)表示从(0,0)移动到(100,100)。

2.2.5. 特殊效果：

Dialogue: 0,0:00:03.42,0:00:05.62,Top,,0,0,0,,{\fad(500,500)\blur3}左右淡入淡出，模糊度3

其中\blur3表示模糊度为3。

2.2.6. 合的ASS字幕案例：

[Script Info]
; Script generated by FFmpeg/Lavc59.18.100
Title: 某电影
Original Script: 某人
ScriptType: v4.00+
WrapStyle: 0
Collisions: Normal
PlayResX: 1920
PlayResY: 1080
Timer: 100.0000[V4 Styles]
Format: Name, Fontname, Fontsize, PrimaryColour, SecondaryColour, OutlineColour, BackColour, Bold, Italic, Underline, StrikeOut, ScaleX, ScaleY, Spacing, Angle, BorderStyle, Outline, Shadow, Alignment, MarginL, MarginR, MarginV, Encoding
Style: Default,Arial,30,&Hffffff,&Hffffff,&H0,&H0,0,0,0,0,100,100,0,0,1,1,0,2,10,10,50,0[Events]
Format: Layer, Start, End, Style, Name, MarginL, MarginR, MarginV, Effect, Text
Dialogue: 0,0:00:00.00,0:00:02.00,Default,,0,0,0,,这是0到2秒显示的{\b1}{\i1}字幕{\i0}{\b0}
Dialogue: 0,0:00:02.00,0:00:04.00,Default,,0,0,0,,这是2到4秒显示的字幕
Dialogue: 0,0:00:04.00,0:00:07.00,Default,,0,0,0,,这是4到7秒显示的字幕
Dialogue: 0,0:00:07.00,0:00:10.00,Default,,0,0,0,,这是7到10秒显示的字幕
Dialogue: 0,0:00:10.00,0:00:30.00,Default,,0,0,0,,这是10到30秒显示的字幕{\an5\move(960,700,960,900)\t(\fscx200\fscy200\frx360\fry360\fad(200,200))\fs60\p5\t(\fscx100\fscy100\frx0\fry0\fad(200,200))\c&HFFFFFF&\3c&HA000&}高级操作.

在这个案例中，我们可以看到SCRIPT INFO中定义了脚本的一些基本信息，V4 Styles中定义了字幕样式，Events中定义了具体的字幕内容和效果。

在字幕内容中，使用了\an5表示居中上对齐，\move(960,700,960,900)表示在x=960，y从700移动到900，\t()表示特效，\fscx表示X轴缩放，\fscy表示Y轴缩放，\frx表示X轴旋转，\fry表示Y轴旋转，\fs表示字号大小，\p表示描边的点数，\c表示字体颜色，\3c表示描边的颜色。

此外，在这个案例中还使用了透明度、渐变、模糊等各种效果，可以看出ASS字幕的灵活性和功能性非常强大。

3. 使用FFmpeg添加字幕的流程

3.1. 编译带有libass的FFmpeg

    1. 下载FFmpeg6.0源码
    1. 下载libass，解压到FFmpeg源码目录，并且重命名为libass
    1. 在FFmpeg根目录编写编译脚本，并且执行
    function build() {./configure \--prefix=$PREFIX \--target-os=$PLATFORM \--disable-static \--enable-libass \--enable-shared || exit 0make cleanmake install
}
PREFIX=/usr/local/ffmpeg
#PLATFORM=linux
PLATFORM=darwinbuild
    1. 编译完成后，查看版本信息：/usr/local/ffmpeg/bin/ffmpeg -version，可见启用了--enable-libass
    MacBook-Pro:FFmpeg-n6.0 mac$ /usr/local/ffmpeg/bin/ffmpeg -version
ffmpeg version 6.0 Copyright (c) 2000-2023 the FFmpeg developers
built with Apple clang version 14.0.0 (clang-1400.0.29.202)
configuration: --prefix=/usr/local/ffmpeg --target-os=darwin --disable-static --enable-libass --enable-libass --enable-gpl --extra-cflags=-I/usr/local/ffmpeg/libx264/include --extra-ldflags=-L/usr/local/ffmpeg/libx264/lib --enable-libx264 --enable-shared
libavutil      58.  2.100 / 58.  2.100
libavcodec     60.  3.100 / 60.  3.100
libavformat    60.  3.100 / 60.  3.100
libavdevice    60.  1.100 / 60.  1.100
libavfilter     9.  3.100 /  9.  3.100
libswscale      7.  1.100 /  7.  1.100
libswresample   4. 10.100 /  4. 10.100
libpostproc    57.  1.100 / 57.  1.100

    可以配置环境变量，方便使用

3.2. 生成字幕命令

3.2.1 SRT硬字幕命令

ffmpeg -i input.mp4 -vf subtitles=subtitle.srt output_srt.mp4

3.2.2 ASS硬字幕命令

ffmpeg -i input.mp4 -vf ass=subtitle.ass output_ass.mp4

3.2.3 SRT和ASS软字幕命令

ffmpeg -i input.mp4 -i subtitle.srt -c copy -c:s mov_text -metadata:s:s:0 language=chi ouptut_chi.mp4
or
ffmpeg -i input.mp4 -i subtitle.ass -c copy -c:s mov_text -metadata:s:s:0 language=chi ouptut_chi.mp4

3.2.4 SRT可以转ASS命令

ffmpeg -i subtitle.srt subtitle.ass

3.2.3 多通道(软)字幕命令

1. 准备字幕文件：假设有中文字幕文件为ch.srt，英文字幕文件为en.srt。

  • 中文字幕文件：ch.srt
1
00:00:0,000 --> 00:00:5,000
这里是视频的标题 12
00:00:5,000 --> 00:00:10,000 
这里是视频的标题 2
  • 英文字幕文件：en.srt
1
00:00:0,000 --> 00:00:5,000
Here's the video's title 12
00:00:5,000 --> 00:00:10,000 
Here's the video's title 2

2. 命令

ffmpeg -i input.mp4 -i ch.srt -i en.srt -map 0 -map 1 -map 2 -c copy -c:s mov_text -metadata:s:s:0 language=chi -metadata:s:s:1 language=eng output_chi_eng.mp4

注意：ass格式同样的操作

ffmpeg -i input.mp4 -i ch.ass -i en.ass -map 0 -map 1 -map 2 -c copy -c:s mov_text -metadata:s:s:0 language=chi -metadata:s:s:1 language=eng output_chi_eng_ass.mp4

3.2.4 多通道(软)字幕，中英字幕实现

1. 准备字幕文件：假设有中英文字幕文件为ch_en.srt，英文字幕文件为en.srt。

  • 中文字幕文件：ch_en.srt
1
00:00:0,000 --> 00:00:5,000
这里是视频的标题 1
Here's the video's title 12
00:00:5,000 --> 00:00:10,000 
这里是视频的标题 2
Here's the video's title 2
  • 英文字幕文件：en.srt
1
00:00:0,000 --> 00:00:5,000
Here's the video's title 12
00:00:5,000 --> 00:00:10,000 
Here's the video's title 2

2. 命令

ffmpeg -i input.mp4 -i ch_en.srt -i en.srt -map 0 -map 1 -map 2 -c copy -c:s mov_text -metadata:s:s:0 language=chi_eng -metadata:s:s:1 language=eng output_chi_eng_eng.mp4

3. 最后使用ffprobe查看一下生成文件的内容

Input #0, mov,mp4,m4a,3gp,3g2,mj2, from 'output_chi_eng_eng.mp4':Metadata:major_brand     : isomminor_version   : 512compatible_brands: isomiso2avc1mp41encoder         : Lavf60.3.100description     : Bilibili VXCode Swarm Transcoder v0.6.11Duration: 00:05:24.20, start: 0.000000, bitrate: 531 kb/sStream #0:0[0x1](und): Video: h264 (High) (avc1 / 0x31637661), yuv420p(progressive), 852x480, 397 kb/s, 25 fps, 25 tbr, 12800 tbn (default)Metadata:handler_name    : VideoHandlervendor_id       : [0][0][0][0]Stream #0:1[0x2](und): Audio: aac (LC) (mp4a / 0x6134706D), 48000 Hz, stereo, fltp, 127 kb/s (default)Metadata:handler_name    : SoundHandlervendor_id       : [0][0][0][0]Stream #0:2[0x3](chi): Subtitle: mov_text (tx3g / 0x67337874), 0 kb/s (default)Metadata:handler_name    : SubtitleHandlerStream #0:3[0x4](eng): Subtitle: mov_text (tx3g / 0x67337874), 0 kb/sMetadata:handler_name    : SubtitleHandler

来自维护项目，https://github.com/xhunmon/VABlog：
YUV/PCM/H264/H265/AAC/FFmpeg/Opengl. 这有丰富的音视频开发的学习资源、开发工具、优秀书籍、教程、面试题和开源项目，旨在帮助开发者和爱好者更好地学习、实践和工作。

参考：

  • https://www.bannerbear.com/blog/how-to-add-subtitles-to-a-video-file-using-ffmpeg/

http://www.ppmy.cn/news/39193.html

相关文章

2023年第四届世界蜂疗大会将于7月25日至27日在重庆武隆举办

2023年第四届世界蜂疗大会将于7月25日至27日在重庆武隆举办

【39蜂疗网】记者 讯 从世界蜂疗大会智库专家筹备会上获悉，2023年第四届世界蜂疗大会将于7月25日至27日在重庆武隆举办；本次大会以“加速推进新时代蜂疗事业高质量发展”为主题，将深刻把握全球中医蜂疗产业发展趋势。将对后疫情时代蜂疗行业高…
阅读更多...
Python3 os.mkdir() 方法、Python3 os.tcgetpgrp() 方法

Python3 os.mkdir() 方法、Python3 os.tcgetpgrp() 方法

Python3 os.mkdir() 方法 概述 os.mkdir() 方法用于以数字权限模式创建目录。默认的模式为 0777 (八进制)。 语法 mkdir()方法语法格式如下： os.mkdir(path[, mode])参数 path -- 要创建的目录 mode -- 要为目录设置的权限数字模式 返回值 该方法没有返回值。…
阅读更多...
Linux复习 / 进程控制QA梳理

Linux复习 / 进程控制QA梳理

文章目录前言Q&A进程终止Q：exit和_exit的区别？Q：内核是如何终止进程的？进程等待Q：为什么要等待子进程？Q：如何等待子进程（wait/waitpid的区别）？进程替换Q&…
阅读更多...
基于模型预测控制(MPC)的微电网调度优化的研究（Matlab代码实现）

基于模型预测控制(MPC)的微电网调度优化的研究（Matlab代码实现）

💥💥💞💞欢迎来到本博客❤️❤️💥💥 🏆博主优势：🌞🌞🌞博客内容尽量做到思维缜密，逻辑清晰，为了方便读者。 ⛳️座右铭&a…
阅读更多...
Vue插槽理解

Vue插槽理解

Vue插槽理解插槽插槽 slot又名插槽，vue内容分发机制，组件内部的模板引擎使用slot元素作为承载分发内容的出口 插槽slot是子组件的一个模板标签元素，而这一个元素是否显示，以及怎么显示是由父组件决定的 slot分为三类：默…
阅读更多...
Leetcode.559 N 叉树的最大深度

Leetcode.559 N 叉树的最大深度

题目链接 Leetcode.559 N 叉树的最大深度 easy 题目描述 给定一个 N 叉树，找到其最大深度。 最大深度是指从根节点到最远叶子节点的最长路径上的节点总数。 N 叉树输入按层序遍历序列化表示，每组子节点由空值分隔（请参见示例）。…
阅读更多...
ubuntu的neo4j启动问题

ubuntu的neo4j启动问题

一、权限 首先赋予改文件可执行权限，赋予完会从白色变成绿色。 cd neo4j/bin目录下 sudo chmod x neo4j 二、sudo找不到java的问题 java -version正常但是sudo java -version不正常。 要么将jdk的path加入到secure_path 要么干脆直接注释掉 sudo visudo #注意&#…
阅读更多...
[c++17] --- [[nodiscard]]和[[maybe_unused]]

[c++17] --- [[nodiscard]]和[[maybe_unused]]

1 [[nodiscard]] 介绍和应用示例 [[nodiscard]] 是C++17引入的一个属性(Attribute)，它用于向编译器提示一个函数的返回值应该被检查，避免其被忽略或误用。它可以被用于函数、结构体、类、枚举和 typedef 等声明上，表示如果函数返回值未被使用，或者结构体、类、枚举和 type…
阅读更多...
最新文章

Copyright @ 2022~2023