- 问题描述:服务器集群上在使用如下命令对img_path文件夹下的图片(图片名1.jpg……300.jpg)进行批量合成视频过程中,ffmpeg创建完视频文件后,写入过程中,自动kill,捕获异常为空。
- 问题原因:集群pods的内存不够,导致ffmpeg在创建完视频文件后,写入过程中内存不够,ffmpeg自动中断
- 解决流程:
- 【更换其它库】尝试使用opencv(合成后的视频占用空间太大),moviepy(基于ffmpeg封装的)imagepy等常用包对视频进行合成,经过尝试,所有基于ffmpeg实现的方式都会报相同的错
- 【分析推断原因】基于上述现象,推断ffmpeg版本问题,或者ffmpeg环境损坏,所以尝试更新ffmpeg到最新版,使用新的免安装的ffmpeg包
- 【测试推断,得到结论】事实证明问题依旧
- 【发现真正问题原因】经过反复测试,问题根本原因是集群pods的内存不够,在ffmpeg合成时占用内存较高,经实验,内存4096M进能够支撑同时完成20张左右图片同时压缩成视频
- 解决思路:将图片10个为一组,进行拆分下载,下载完,利用ffmpeg将图片合成视频,在本地暂存,删除已经合成过的图片,然后再次重复下载图片–合成视频–删除图片步骤,直至所有图片处理完成后,得到30个左右的视频文件,下一步就是将所有视频文件按照顺序利用ffmpeg压缩成一个视频【经测试,已经稳定处理】
cmd = ['ffmpeg', '-y', '-framerate', '30', '-i', '{}/%d.jpg'.format(img_path), '-c:v','libx264', '-crf', '25', '-pix_fmt', 'yuv420p', '{}'.format(video_name)]process = subprocess.Popen(cmd)
process.wait()
下边这个是多个视频合成命令,用其他的,比如管道命令(用一堆|隔开文件名)方式,会导致视频只合并第一个,后续的并不会合并,经测试以下方式可用
cmd = ['ffmpeg','-f','concat','-safe','0','-i','input.txt','-c','copy','output.mp4']
# 生成 input.txt 文件,包含要拼接的视频文件列表
with open('input.txt', 'w') as f:for file in videos_name_list:f.write("file '{}'\n".format(file))
# 执行拼接命令
process = subprocess.Popen(cmd)
process.wait()
# 删除临时的 input.txt 文件
try:os.remove('input.txt')
except BaseException:pass
视频图片处理常用函数封装:
判断图片是否损坏
def check_img(self, file):""""""try:with Image.open(file) as image:image.load()except (IOError, OSError):return Falsereturn True
判断视频是否损坏,获取视频时长(s)(通过获取视频时长)
def get_video_duration(self, video_path):""""""try:video = VideoFileClip(video_path)duration = video.durationvideo.close()except BaseException:duration = 0return duration
对列表(j假设列表中是一堆url)进行切分(按照一定长度),得到切分后的分组数,并获取所有分组内容
def get_detail(self, url_list):# 每一组的最大长度max_size = 10# 分组数total_nums = len(url_list) // max_size if len(url_list) % max_size == 0 else len(url_list) // max_size + 1for flag_num in range(total_nums):max_num = len(url_list) if (flag_num + 1) * max_size >= len(url_list) else (flag_num + 1) * max_sizefor index, url in enumerate(url_list[flag_num * max_size:max_num]):yield index,url