远程监控项目描述以及总体框架

embedded/2025/3/11 8:47:50/

         远程监控项目基于之前的本地渲染项目做了一个扩展。本地渲染项目没有涉及到解码部分,是直接从rv126拿到摄像头的vi数据,做转换就刷新到了上面去。

        uvc摄像头用ffmpeg做推流,所以这个远程是先拿到我们这个uvc摄像头的数据进行解码才能刷新到网页上面去。

        远程监控项目,这个项目的主要功能是使用FFMPEG拉取UVC传输的H264码流使用UDP码流,然后利用RV1126的解码模块对其UVC码流进行解码,最后把解码的YUV的数据渲染到CGI的HTML界面并且支持FFMPEG获取远程监控摄像头的参数,包括:Width(分辨率宽度)、Height(分辨率高度)、流媒体地址(Url)。

        这个项目还支持远程抓拍和图片查看功能,就是把远程的视频利用OPENCV把UVC的视频数据进行抓取,并且保存到/www/Image的目录里面。拍照完成之后,则可以在HTML的Photo_Manage查看。除了远程抓拍功能外还有录制功能,目前已经可以录制H264。

https://i-blog.csdnimg.cn/direct/994fdf3d58ab48dd8f81f6047524dba4.png" width="1007" />

        这个项目还提供了URL地址的编辑,目前只支持一个管理URL地址。这个URL地址目前是拉流的URL地址。它的工作原理是在HTML页面上的输入框里面输入URL地址,输入之后则把URL保存到json文件里面

https://i-blog.csdnimg.cn/direct/85eacaf053e34381883c923a88f10629.png" width="958" />        这个项目还提供了MP4名称的编辑。它的工作原理是在HTML页面上的输入框里面输入MP4名称,输入之后则把MP4名字保存到json文件里面

本次项目用到的重要技术知识点:

FFMPEG拉流UVC摄像头的码流

RV1126的VDEC解码每一帧码流

共享内存存储每一帧VDEC数据

使用OPENCV对每一帧VDEC解码数据添加时间戳

HTTP刷新每一帧VDEC解码数据

利用OPENCV和消息队列抓拍远程监控的照片

使用共享内存传输摄像头参数到页面

利用FFMPEG录制MP4视频

监控项目RV1126后端程序的功思维图

https://i-blog.csdnimg.cn/direct/7f63c5c35d444cc2a7c202048ca94e15.png" width="2586" />

        上图就是RV1126后端程序的思维导图,后端程序主要由上面9个重要工作,包括:RV1126的VDEC解码模块初始化、FFMPEG拉流模块的初始化、YUV视频共享内存的初始化、视频参数共享内存的初始化、视频数据信号量的初始化、视频参数信号量的初始化、消息队列的初始化、FFMPEG录制模块的初始化、线程的创建(包括:read_ffmpeg_thread线程、rv1126_vdec_thread线程、read_msg_thread线程)。 

RV1126的VDEC解码模块初始化:

        VDEC是RV1126的解码模块,它主要是解码UVC摄像头传输过来的H264码流变成YUV原始数据。VDEC的初始化需要使用RKEMDIA提供的API进行创建,这个API是RK_MPI_VDEC_CreateChn进行创建。

FFMPEG拉流模块的初始化:

        拉流模块指的是FFMPEG输入模块,这里关键是调用avformat_input_format来初始化输入模块。

YUV视频共享内存的初始化:

        解码出来的YUV数据需要存放到共享内存才能够刷新到CGI程序,这里直接使用shmget来初始化共享内存

视频参数共享内存的初始化:

        除了YUV数据之外,摄像头的参数也需要存放到共享内存才能够正常在网页端进行显示,这里同样要使用shmget来初始化共享内存。

视频数据信号量的初始化:

        在使用共享内存为了确保数据的原子性和安全性就需要用到信号处理,这里使用的semget进行初始化信号量,主要是用于视频数据的安全性。

消息队列的初始化:

        RV1126后台程序需要通过消息队列来接收前端CGI程序发过来的指令,消息队列的初始化直接调用msgget对消息队列进行处理。

 FFMPEG录制模块的初始化:

        由于需要把拉流的视频录制成MP4,所以需要使用到FFMPEG的输出模块(录制模块就是输出模块)进行录制,使用的API是avformat_alloc_output_context2

        录制下来不是为了单单录下来,而是未来记录我推流的内容对不对,接收的对不对,永久查看。

线程的创建:

        初始化必要的模块后,就需要创建三个线程进行处理了,分别是:

read_ffmpeg_thread线程(解析UVC传输的H264码流并送到VDEC编码器)、

rv1126_vdec_thread线程(获取VDEC解码器数据并存放到摄像头共享内存里面,同时把摄像头参数存放到参数共享内存)。

read_msg_thread线程(读取消息队列的指令进行操作,包括:抓拍、开始录像、停止录像)


http://www.ppmy.cn/embedded/171716.html

相关文章

React之userEffect的使用

一、userEffect是什么 在React组件中,副作用操作是指那些会被影响的其他的组件,而且不能在渲染过程中完成相关操作。其中,常见的副作用就是从API接口中获取数据。而 useEffect 提供了一种在函数组件中处理副作用的方式,使得函数组…

工业数据采集与控制:ARM一体机的低功耗高可靠性方案

在工业4.0和智能化转型的浪潮下,传统工业现场的数据采集与控制方式正在被颠覆。过去,工业现场的数据采集和控制往往依赖于分散的设备和复杂的系统集成,而如今,ARM工业现场采集控制看板显示一体机的出现,为工业自动化带…

2线性表之链表

1.链表 链表是一种 物理存储结构上非连续、非顺序 的存储结构,数据元素的 逻辑顺序 是通过链表中的 指针链接 次序实现的 。 关于顺序表的不足: 扩容有性能消耗且有可能存在空间浪费。 扩容时,如果扩小了,大量插入数据时&#xff…

Python大数据可视化:基于大数据技术的共享单车数据分析与辅助管理系统_flask+hadoop+spider

开发语言:Python框架:flaskPython版本:python3.7.7数据库:mysql 5.7数据库工具:Navicat11开发软件:PyCharm 系统展示 管理员登录 管理员功能界面 场地信息界面 单车信息界面 归还信息界面 共享单车界面 系…

Unity 通用UI界面逻辑总结

概述 在游戏开发中,常常会遇到一些通用的界面逻辑,它不论在什么类型的游戏中都会出现。为了避免重复造轮子,本文总结并提供了一些常用UI界面的实现逻辑。希望可以帮助大家快速开发通用界面模块,也可以在次基础上进行扩展修改&…

STM32如何精准控制步进电机?

在工业自动化、机器人控制等场合,步进电机以其高精度、开环控制的特性得到了广泛应用。而在嵌入式系统中,使用STM32进行步进电机的精确控制,已成为开发者的首选方案之一。 本文将从嵌入式开发者的角度,深入探讨如何基于STM32 MCU…

【JavaEE】SpringBoot快速上手,探秘 Spring Boot,搭建 Java 项目的智慧脚手架

1.Spring Boot介绍 在学习SpringBoot之前, 我们先来认识⼀下Spring ,我们看下Spring官⽅的介绍 可以看到,Spring让Java程序更加快速, 简单和安全。 Spring对于速度、简单性和⽣产⼒的关注使其成为世界上最流⾏的Java框架。 Spring官⽅提供了很多开源的…

ERROR:L6002U 一种解决方案

1.问题描述 前面的文章也讲到过有一次出现,这次再看一下为什么 打开这个文件,以及它的头文件 源文件报错信息: 2、原因查找 这是由于不同的人上传不同的工程,拉取更新导致的,可能的原因是keil文件夹的组织方式。 很…