一、前言
掉线重连在很早很早以前就做了,基本上的方法都是搞个变量存储最后收到图片的时间,然后开个定时器判断,如果不在暂停模式下,当前时间和最后收到图片的时间差值超过了设定的超时时间,比如5s则认为掉线,然后调用close方法关闭,调用open重新打开视频流,依次重复。
最开始做的时候就发现如果这个最后收到图片的时间更新在视频流控件的widget中,时间久了会假死,明明还在绘制中,但是此时间不会更新,网上也看到有些人遇到了类似的问题,后面把此变量移到解码采集线程中,才正常,正确的做法也是必须放到采集线程才是对的,毕竟硬解码opengl显示以后,和painter就没啥关系了,或者视频流交给句柄以后,也跟painter没啥关系,必须从源头处理才对。
视频流控件自带了自动重连的机制,这样用户再使用的时候不用管如何重连,只需要开启自动重连属性即可,默认开,还有一种情况可能要关闭自动重连属性,比如播放本地视频文件,有时候只需要播放一次就行,不需要播放完成以后又重新播放,如果确实需要,则关联播放完毕信号自行重新open即可。
在具体的使用过程中发现,在视频监控系统中,比如有16个通道,如果自动重连在单个的视频流控件中,则会出现一种情况,网络断了,然后又恢复了,则16个通道很可能在同一时间瞬间恢复,此时CPU和内存暴增,甚至出现过程序崩溃的情况,那怎么搞呢,后面重新写了个类专门负责管理视频监控通道的所有视频控件,开个定时器去排队处理需要重连的设备即可,而不是瞬间全部重连导致瞬间压力暴增。
二、功能特点
- 支持多画面切换,全屏切换等,包括1+4+6+8+9+13+16+25+36+64画面切换。
- 支持alt+enter全屏,esc退出全屏。
- 自定义信息框+错误框+询问框+右下角提示框(包含多种格式)。
- 17套皮肤样式随意更换,所有样式全部统一,包括菜单等。
- 云台仪表盘鼠标移上去高亮,八个方位精准识别。
- 底部画面工具栏(画面分割切换+截图声音等设置)移上去高亮。
- 可在配置文件更改左上角logo+中文软件名称+英文软件名称。
- 封装了百度地图,视图切换,运动轨迹,设备点位,鼠标按下获取经纬度等。
- 支持图片地图,设备按钮可以在图片地图上自由拖动自动保存位置信息。
- 在百度地图和图片地图上,双击视频可以预览摄像头实时视频。
- 堆栈窗体,每个窗体都是个单独的qwidget,方便编写自己的代码。
- 顶部鼠标右键菜单,可动态控制时间CPU+左上角面板+左下角面板+右上角面板+右下角面板的显示和隐藏,支持恢复默认布局。
- 工具栏可以放置多个小图标和关闭图标。
- 左侧右侧可拖动拉伸,并自动记忆宽高位置,重启后恢复。
- 双击摄像机节点自动播放视频,双击节点自动依次添加视频,会自动跳到下一个,双击父节点自动添加该节点下的所有视频。
- 摄像机节点拖曳到对应窗体播放视频,同时支持拖曳本地文件直接播放。
- 视频画面窗体支持拖曳交换,瞬间响应。
- 双击节点+拖曳节点+拖曳窗体交换位置,均自动更新url.txt。
- 支持从url.txt中加载通道视频播放,自动记忆最后通道对应的视频,软件启动后自动打开播放。
- 右下角音量条控件,失去焦点自动隐藏,音量条带静音图标。
- 集成百度在线地图和离线地图,可以添加设备对应位置,自动生成地图,支持缩放和添加覆盖物等。
- 视频拖动到通道窗体外自动删除视频。
- 鼠标右键可删除当前+所有视频,截图当前+所有视频。
- 录像机管理、摄像机管理,可添加删除修改导入导出打印信息,立即应用新的设备信息生成树状列表,不需重启。
- 在pro文件中可以自由开启是否加载地图。
- 视频播放可选2种内核自由切换,vlc+ffmpeg,均可在pro中设置。
- 可设置1+4+9+16画面轮询,可设置轮询间隔以及轮询码流类型等,直接在主界面底部工具栏右侧单击启动轮询按钮即可,再次单击停止轮询。
- 默认超过10秒钟未操作自动隐藏鼠标指针。
- 支持onvif搜素设备,支持任意onvif摄像机,包括但不限于海康大华宇视天地伟业华为等。
- 支持onvif云台控制,可上下左右移动云台摄像机,包括复位和焦距调整等。
- 同时支持sqlite、mysql、postsql等数据库。
- 可保存视频,可选定时存储或者单文件存储,可选存储间隔时间。
- 可设置视频流通信方式tcp+udp,可设置视频解码是速度优先、质量优先、均衡等。
- 可设置硬解码类型,支持qsv、dxva2、d3d11va等。
- 默认采用opengl绘制视频,超低的CPU资源占用,支持yuyv和nv12两种格式绘制,很牛逼。
- 高度可定制化,用户可以很方便的在此基础上衍生自己的功能,支持linux和mac系统。
三、效果图
四、核心代码
void FFmpegThread::run()
{
while (!stopped) {
//根据标志位执行初始化操作
if (isPlay) {
if (init()) {
initSave();
emit receivePlayStart();
} else {
break;
emit receivePlayError();
}
isPlay = false;
continue;
}
if (isPause) {
//这里需要假设正常,暂停期间继续更新时间
lastTime = QDateTime::currentDateTime();
msleep(1);
continue;
}
//重新计时
time.restart();
QMutexLocker locker(&mutex);
if (av_read_frame(formatCtx, packet) >= 0) {
//更新最后的解码时间
lastTime = QDateTime::currentDateTime();
//判断当前包是视频还是音频
int index = packet->stream_index;
if (index == videoStreamIndex) {
existImage = true;
decodeVideo();
} else if (index == audioStreamIndex) {
decodeAudio();
}
} else if (!isRtsp) {
//如果不是视频流则说明是视频文件播放完毕
break;
}
av_packet_unref(packet);
av_freep(packet);
msleep(1);
}
emit sig_stopSave();
//线程结束后释放资源
msleep(100);
free();
stopped = false;
isPlay = false;
isPause = false;
existImage = false;
emit receivePlayFinsh();
qDebug() << TIMEMS << "stop ffmpeg thread";
}
void FFmpegWidget::checkVideo()
{
//仅仅只有音频不需要处理
if (ffmpeg->getOnlyAudio()) {
return;
}
QDateTime now = QDateTime::currentDateTime();
QDateTime lastTime = ffmpeg->getLastTime();
int sec = lastTime.secsTo(now);
if (sec >= timeout) {
restart();
}
}