本文摘自:https://blog.csdn.net/weixin_45326556/article/details/95058054
很多人对于直播的带来的延时还是挺在意的,下面我分享的这篇文章能给大家带来个技术上的指引,好了,坐下来慢慢看:
最近接触了许多客户,许多是做安全方面产品的客户,有些还涉及到jun队后勤的等等,他们普遍对采集延迟,编码延迟,传输延迟等都有很大关注。例如有个客户是做反狙击探测的,那可是与生命相关的,容不得试错的(PS:我无法判断海思Hi3531D/Hi3521D系列产品是否适合做这种高实时性的产品,当然做个评估或者算法验证完全是可以的)。
精准测试延迟的方法要用专业仪器来测量,或者在程序中记录精准时间来判断,这些方法过于专业,也不方便展示,本文采用的测量方法是目测法,这个方法不大精准,但最容易展示。
主板参考链接:https://item.taobao.com/item.htm?spm=a2oq0.12575281.0.0.15d11debUtUQr8&ft=t&id=630502728823
如上图所,通常直播是经过采集,编码,网络输出,网络接收,解码,显示输出,经过这几大环节后,用户才能看到直播的画面,其总延迟是T1-T3;采集延迟为T1-T2。直播延迟还跟网络协议有关,其中UDP,RTMP和RTSP延迟相对较小,HTTP延迟偏大,延迟最大的是HLS,这种技术是切片技术,很适合做对延迟要求不高的网络直播(例如非互动的单向直播,IPTV就是这类),该技术最大的好处就是能在网络带宽波动很大的环境下也能保持流畅(其实就是因为缓冲够大嘛)。
为了抓拍到T1,T2,T3,我们使用单反相机快速连拍功能,分别对UDP,RTSP和RTMP协议的测试进行抓拍,然后对抓拍到图片序列进行统计分析。抓拍到的图片序列已经上传到百度网盘,需要的可以从我们百度网盘上下载:
链接:https://pan.baidu.com/s/1ySnVeRHsuvzvtywh8xDz1g
提取码:qx9x
如上图所示,做为信号源的笔记本显示的时间码是19:35:55.217,而编码板采集预览显示的时间码也是19:35:55.217,说明采集延迟为T1-T2
=217-217=0,忽略不计;解码板通过网络接收来自编码板的网络流,解码后通过HDMI输出,其显示的时间码是19:35:55.174,那说明延迟为T1-T3
=217-174=43,也就是延迟为43毫秒。为了方便用户查看和对比,我们把拍下来的照片的时间码做了记录,并用EXCEL表做了计算,参见下表。
从上表可以看出,UDP(TS封装)的平均延迟为71.1毫秒,由于我们的TS封装是使用了FFMPEG来进行封装的,所以封装延迟较大,如果采用RAW H264/H265 UDP,估计延迟会大大降低;RTSP OVER UDP平均延迟为83豪秒,还真搞不懂这个延迟什么会这么大;RTMP的延迟仅为52.6毫秒,真是有点意外,而且每个采样的延迟几乎都是在43毫秒左右,很均匀,不像TS-UDP和RTSP OVER UDP每个采样测出的延迟数据波动有点大。
完整的工程参见:https://gitee.com/LinkPi/3531D/tree/master/LowLatencyENC
//main.cpp
#include <QCoreApplication>
#include "Link.h"
#define RTSP
//#define UDP
//#define RTMP
int main(int argc, char *argv[])
{
QCoreApplication a(argc, argv);
Link::init();
LinkObject *vi=Link::create("InputVi");
QVariantMap dataVi;
dataVi["interface"]="HDMI-A";
vi->start(dataVi);
LinkObject *vo=Link::create("OutputVo");
QVariantMap dataVo;
dataVo["type"]="hdmi";
dataVo["lowLatency"]=true;
vo->start(dataVo);
vi->linkV(vo);
LinkObject *encV=Link::create("EncodeV");
QVariantMap dataEncV;
dataEncV["codec"]="h264";
dataEncV["framerate"]=60;
dataEncV["width"]=1920;
dataEncV["height"]=1080;
dataEncV["bitrate"]=8000;
dataEncV["lowLatency"]=true;
encV->start(dataEncV);
LinkObject *mux=Link::create("Mux");
QVariantMap dataRtsp;
#ifdef RTSP
dataRtsp["path"]="mem://test";
dataRtsp["format"]="rtsp";
#elif UDP
dataRtsp["path"]="mem://test";
dataRtsp["format"]="mpegts";
#elif RTMP
dataRtsp["path"]="rtmp://127.0.0.1/live/test";
dataRtsp["format"]="flv";
#endif
dataRtsp["mute"]=true;
mux->start(dataRtsp);
#ifdef RTSP
LinkObject *rtspServer=Link::create("Rtsp");
rtspServer->start();
vi->linkV(encV)->linkV(mux)->linkV(rtspServer);
#elif UDP
LinkObject *udp=Link::create("TSUdp");
QVariantMap dataUDP;
dataUDP["ip"]="192.168.1.77";
dataUDP["port"]=1234;
udp->start(dataUDP);
vi->linkV(encV)->linkV(mux)->linkV(udp);
#elif RTMP
vi->linkV(encV)->linkV(mux);
#endif
return a.exec();
}
完整的工程参见:https://gitee.com/LinkPi/3531D/tree/master/LowLatencyDEC
//main.cpp
#include <QCoreApplication>
#include "Link.h"
#define RTSP
//#define UDP
//#define RTMP
int main(int argc, char *argv[])
{
QCoreApplication a(argc, argv);
Link::init();
LinkObject *vo=Link::create("OutputVo");
QVariantMap dataVo;
dataVo["type"]="hdmi";
vo->start(dataVo);
LinkObject *net=Link::create("InputNet");
QVariantMap dataNet;
#ifdef RTSP
dataNet["path"]="rtsp://192.168.1.76/test";
#elif UDP
dataNet["path"]="udp://@:1234";
#elif RTMP
dataNet["path"]="rtmp://192.168.1.76/live/test";
#endif
dataNet["protocol"]="udp";
dataNet["buffer"]=false;
dataNet["sync"]=false;
net->start(dataNet);
LinkObject *dec=Link::create("DecodeV");
QVariantMap dataDec;
dataDec["lowLatency"]=true;
dec->start(dataDec);
net->linkV(dec)->linkV(vo);
return a.exec();
}
为了方便阅读,我们这里对每一种网络协议抓拍到的图片展示三幅图,若需要查看全部的图,请到网盘下载。
从以上评测数据来看,海思芯片不愧称的上是业内领头羊,ENC5完美的发挥了它的优势性能。希望这篇文章能给大家技术上的指引,谢谢大家能看完本文,还请轻台贵手,多多点赞和支持,关注我哦!
文章浏览阅读467次。计算机毕业设计Java疫情防控医用品管理(系统+源码+mysql数据库+Lw文档)springboot基于SpringBoot的婚庆策划系统的设计与实现。JSP健身俱乐部网站设计与实现sqlserver和mysql。JSP网上测试系统的研究与设计sqlserver。ssm基于SpringMvC的流浪狗领养系统。ssm基于Vue.js的音乐播放器设计与实现。ssm校园流浪猫图鉴管理系统的设计与实现。_疫情防护用品销售管理系统 论文
文章浏览阅读988次,点赞28次,收藏28次。最后小编想说:不论以后选择什么方向发展,目前重要的是把Android方面的技术学好,毕竟其实对于程序员来说,要学习的知识内容、技术有太多太多,要想不被环境淘汰就只有不断提升自己,从来都是我们去适应环境,而不是环境来适应我们!这里附上我整理的几十套腾讯、字节跳动,京东,小米,头条、阿里、美团等公司19年的Android面试题。把技术点整理成了视频和PDF(实际上比预期多花了不少精力),包含知识脉络 + 诸多细节。由于篇幅有限,这里以图片的形式给大家展示一小部分。
文章浏览阅读600次,点赞11次,收藏6次。*单片机设计介绍,基于单片机数码管秒表控制系统设计。
文章浏览阅读235次。python小程序之验证码图片的生成定义随机字母的生成函数定义随机颜色生成函数,采用RGB格式,生成一个元组调用Image,生成画布,填充底色为白色调用画笔函数Draw,传入画布对象填充画布的每一个色块,作为背景在画布上控制间距,填上每一个字在最后的图上进行模糊操作代码# 生成一个随机的二维码小程序from PIL import Image,ImageDraw,ImageF..._小程序图片验证码后端生成
文章浏览阅读2.2k次。 1. 用户需求分析客户规模:客户有一个总部,具有一定规模的园区网络; 一个分支机构,约有20-50名员工; 用户有很多移动办公用户 客户需求:组建安全可靠的总部和分支LAN和WAN; 总部和分支的终端需要提供安全防护,并实现网络准入控制,未来实现对VPN用户的网络准入检查; 需要提供IPSEC/SSLVPN接入; 在内部各主要部门间,及内外网络间进_思科设备怎么ranga)服务器区域独立防护;
文章浏览阅读445次。4、转移账号生成的 p8 文件(证书文件)1、转移苹果账号的 teamID。2、接受苹果账号的 teamID。5、接受账号生成的 p8 文件。3、转移应用的 AppID。_apple 账号迁移
文章浏览阅读1k次。https://blog.csdn.net/u012328159/article/details/80311892_momentum seg
文章浏览阅读816次。主要的原理就是替换模板里的特殊字符。 1、静态模板页面 template.html,主要是定义了一些特殊字符,用来被替换。 HTML code DOCTYPE HT_监听数据变更自动生成静态html
文章浏览阅读494次。 今日在做一个新闻系统的评论时. 想到了预防"提交"按钮的多次点击的问提 (prevent multiple clicks of a submit button in ASP.NET). 以前碰到此类问提总是用重定位页面来解决. 这次我想找到一个一劳永逸的办法. 通过查讯Google,找到了一些代码,挑选一些较好的修改了一下。public void pa
文章浏览阅读4.7k次。近来公司业务有需要做socks5代理的需求,研究了一下,主要的开源实现有2个:dante http://www.inet.no/dante/ss5 http://ss5.sourceforge.net/比较了一下,还是比较倾向于dante,因为看到有人这样评价ss5:Project has an incredibly poor source code quality. Th_dante 代理 配置pam用户名密码 模式
文章浏览阅读809次。在excel vba 中用到countifs 函数,但用来统计带有特殊符号* 时总是统计chu_vba countifs 源码
文章浏览阅读2.6k次。当两个效果之间变换时,可以使用transition过渡属性,但是有多个效果来回变换时,就需要使用动画效果,且动画过程可控(重复播放,画面暂停,最终画面等)文章目录1、简介2、实现步骤3、复合属性animation4、动画属性1、简介动画的本质是快速切换大量图片在人脑中形成的具有连续性的画面构成动画的最小单元:帧或者动画帧2、实现步骤定义动画@keyframes 动画名称{ from{} to{}}@keyframes 动画名称{ 0%{} 10%{} 20%{} 50._web前端实现图片动画效果