视频编解码 — 带宽预测

news2024/11/27 11:46:14

目录

一、带宽预测作用

二、基于延时的带宽预测算法:

1、算法流程

2、计算延时

3、Trendline Filter

4、网络状态判断

5、带宽调整更新

三、基于丢包的带宽预测算法

1、带宽调整

四、最大带宽探测算法

五、最终的预测选择


一、带宽预测作用

        控制音视频发送的数据量不会在网络带宽不够的时候,发送超出网络带宽的数据量。导致出现长延时和高丢包等问题,从而引发高延时或者卡顿的问题。

        预测出实际的带宽,就可以控制音视频数据的发送数据量。如控制音视频数据的编码码率或者直接控制发送RTP包的速度

WebRTC中主要的带宽预测算法:

1、基于延时的带宽预测算法

2、基于丢包的带宽预测算法

3、最大带宽探测算法

二、基于延时的带宽预测算法:

        主要是通过计算一组RTP包的发送时长接收时长,来判断当前延时的变化趋势

        不断的实时调整更新带宽,来预测带宽

1、算法流程

  1. 计算一组RTP包的发送时长和接收时长,计算延时
  2. 根据当前延时和历史延时的大小来计算延时变化趋势
  3. 根据延时变化趋势判断网络状况;
  4. 根据网络状况调整更新预测带宽值; 

2、计算延时

WebRTC中延时的是将RTP包按照发送时间来分组的,并且要求当前组中的第一个包和最后一个包的发送时间相差不能大于5ms,大于5ms则是新的一组的开始。

1、发送端在发送一个RTP包的时候,记录每一个包序号和实际发送时间,并将这些信息记录到一个历史数据里面。

2、接收端收到每一个包的时候,记录包序号和实际接收时间,每隔一段时间将这些信息组成Transport-CC发送到发送端。信息包括,每个包序号的包是不是接收到了;当前包相比前一个包的接收间隔。

3、发送端收到接收端的报文,就知道每一个包有没有被收到接收RTP包的时间。

4、通过以上信息计算出前后两组包之间的发送时长和接收时长。

  • 接收时长>发送时长,网络承受不了当前数据量,产生了缓存,从而产生延时
  • 接收时长=发送时长,没有延时
  • 接收时长<发送时长,之前网络带宽不够已经缓存了一部分数据,但网络在变好,快速从缓存中将数据发出 

        为了避免网络抖动引起的噪声,需要通过当前延时和历史延时数据来判断延时的变化趋势,来平滑掉网络噪声引起的单个延时抖动。

3、Trendline Filter

        平滑使用的滤波器Trendline Filter,用来计算得到延时变化趋势的。

        Trendline Filter 保存了20个最近的延时数据,是经过平滑后的累计延时,它是通过前面计算得到的延时和历史累计延时加权计算之后得到。

        使用最小二乘法,拟合曲线。

        延时趋势还不能直接说明网络的变化方向,需要过载检测器

4、网络状态判断

过载检测器:

        1、通过当前的延时趋势延时阈值来判断当前网络处于过载、欠载还是正常状态。

        2、通过当前的延时趋势来更新阈值

有了延时趋势和延时阈值之后,可以计算网络状态。进而调整当前带宽值。这就需要速度控制器

5、带宽调整更新

速率控制器主要工作是更新预测带宽值。维护一个状态机,状态机主要用来根据过载检测器得到网络状态和状态机目前所处的状态,来更新状态机的状态。上升、下降、保持。

  1. 下降状态,下降带宽,预估带宽等于0.85倍的接收码率
  2. 上升状态,调高预估带宽 

        当前接收码率距离最大带宽比较远:当前接收码率大于最大带宽加上3倍的最大带宽标准差,或者小于最大带宽减去3倍标准差,使用乘性增,每隔1秒将预估带宽乘以1.08倍,但预估带宽不能大于1.5倍的接收码率。

        当前接收码率距离最大带宽很近:当前接收码率大于最大带宽减去3倍标准差,并小于最大带宽加上3倍标准差。使用加性增。预估带宽没隔一个RTT,增加半个包的大小。

三、基于丢包的带宽预测算法

根据Transport-CC报文的信息计算丢包率,再根据丢包率的多少,进行带宽调整。

丢包率的计算:

lossrate = packet(lost))/packet(all)

1、带宽调整

  • 丢包率<2%,认为网络状况很好,需要调整高带宽值。带宽值等于过去1s钟所有预测得到的带宽值的最小值 * 1.08
  • 2%<丢包率<10%,不做带宽调整
  • 丢包率>20%,需要降低带宽值,带宽值等于当前预估带宽值*(1-0.5*丢包率) 

在网络变差的时候,预估带宽会快速的被下调,但网络变好的时候,会比较缓慢的上升。这就有个问题,如画面从静止突然剧烈运动,即便实际带宽足够,还是会因为预估带宽不够而限制发送码率,从而导致出现模糊和马赛克等问题。这就需要第三种预测算法,快速探测出最大带宽。

四、最大带宽探测算法

  1. 发送端设定一个探测的目标带宽,一般发送时间是15ms,并给这些RTP包标上id
  2. 接收端收到统计包序号和接收时间,将结果组成Transport-CC 报文反馈给发送端
  3. 接收端收到Transport-CC报文后,根据id取出和发送时间并且和本端的历史数据送入到带宽计算器中 
  • 根据发送端的探测RTP包总大小和探测RTP包的发送时间相除,得到发送端的最大带宽值
  • 根据接收端收到的探测RTP包总大小和探测RTP包的总接收时间相除,得到接收端的最大带宽值
  • 取两者中的最小值作为探测到的网络最大带宽值。如果接收端的最大带宽小于0.9倍的发送带宽,说明当前探测目标带宽已经最大,为保险起见,最后将最大带宽取接收端最大带宽的0.95倍。

        如果当前过载检测器检测不是在过载状态,预估带宽值更新为探测到的最大带宽值

适用范围:

最大带宽探测算法,一般在程序刚启动的时候使用,并在程序运行的过程中进行周期性的探测。也可以再实际发送带宽很小的时候探测,防止出现因为实际发送码率很小,无法准确预测网络当前最大带宽的问题。

五、最终的预测选择

  1. 如果不是处于过载状态同时探测了最大带宽,预估带宽更新为探测到的最大带宽
  2. 取基于延时和基于丢包带宽预测得到的预估带宽的最小值。 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/47885.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

荧光AF染料477876-64-5,Alexa Fluor 532,AF532 NHS ester

●中文名&#xff1a;AF532 活性酯&#xff0c;AF5 532酯 ●英文名&#xff1a;AF532-NHS &#xff0c;AF532 NHS ester&#xff0c;Alexa Fluor 532 ●外观以及性质&#xff1a; 荧光AF染料是具有磺化基团的荧光物质。AF染料带负电荷&#xff0c;具有亲水性高、亮度高、光稳定…

软件和硬件中的调用

文章目录**1 概述****2.1 程序进程内的调用&#xff1a;函数调用****2.2 程序进程间的调用&#xff1a;IPC****2.3 远程程序调用&#xff1a;RPC****2.4 远程调用REST****3 硬件“调用”****3.1 综述****总线模型****3.2 片内的总线****3.3 Chiplet多DIE封装互联总线****3.4 板…

1.1 统计学习方法的定义与分类

统计学习方法的定义与分类统计学习的概念统计学习的定义统计学习运用到的领域统计学习的步骤统计学习的分类统计学习的概念 统计学习的定义 统计学习 (Statistical Machine Learning) 是关于计算机基于数据构建概率统计模型并运用模型对数据进行预测与分析的一门学科。 以计…

Python任务调度框架Rocketry

文章目录定时任务库对比简介与其余框架的区别安装初试调度器基础测试方法字符串格式具体时间间隔周期某时间段条件 API条件逻辑方法对比执行选项在主进程和线程中执行进程线程异步设置默认选项日志流水线在一个任务后执行输入作为输出会话级参数函数参数TODO&#xff1a;元参数…

为什么说继承是把双刃剑

为什么说继承是把双刃剑 继承其实是把双刃剑&#xff1a;一方面继承是非常强大的&#xff1b;另一方面继承的破坏力也是很强的。 继承广泛应用于各种Java API、框架和类库之中&#xff0c;一方面它们内部大量使用继承&#xff0c;另一方面它们设计了良好的框架结构&#xff0c…

20221130 RabbitMQ

MQ MQ&#xff08;Message Queue&#xff09;消息队列&#xff0c;是基础数据结构中“先进先出”的一种数据结构。一般用来解决应用解耦&#xff0c;异步消息&#xff0c;流量削峰等问题&#xff0c;实现高性能&#xff0c;高可用&#xff0c;可伸缩和最终一致性架构。 主要的…

【正点原子FPGA连载】第二十三章 DDS信号发生器实验摘自【正点原子】DFZU2EG/4EV MPSoC 之FPGA开发指南V1.0

1&#xff09;实验平台&#xff1a;正点原子MPSoC开发板 2&#xff09;平台购买地址&#xff1a;https://detail.tmall.com/item.htm?id692450874670 3&#xff09;全套实验源码手册视频下载地址&#xff1a; http://www.openedv.com/thread-340252-1-1.html 第二十三章 DDS信…

web网页设计期末课程大作业__公司官网 (曼谷科技 1页)带psd文件

⛵ 源码获取 文末联系 ✈ Web前端开发技术 描述 网页设计题材&#xff0c;DIVCSS 布局制作,HTMLCSS网页设计期末课程大作业 | 家公司官网网站 | 企业官网 | 酒店官网 | 等网站的设计与制 | HTML期末大学生网页设计作业&#xff0c;Web大学生网页 HTML&#xff1a;结构 CSS&…

基于CCE Kubernetes网络与持久化存储实战

✅作者简介&#xff1a; CSDN内容合伙人&#xff0c;全栈领域新星创作者&#xff0c;阿里云专家博主&#xff0c;阿里云问答板块版主&#xff0c;华为云享专家博主&#xff0c;掘金后端评审团成员 &#x1f495;前言&#xff1a; 最近云原生领域热火朝天&#xff0c;那么云原生…

2022年NPDP新版教材知识集锦--【第四章节】(4)

【初始设计与规格阶段】(全部获取文末) 产品设计规格旨在&#xff1a; 明确产品设计并提供量化和客观性; 将产品设计要求传达给设计团队的其他成员; 推进产品从设计到制造的开发。 1、功能性设计(DesignforFunctionality,DFF) 功能设计决定了产品的最终性能&#xff0c;功…

小猴吃苹果-第12届蓝桥杯Scratch选拔赛真题精选

[导读]&#xff1a;超平老师计划推出Scratch蓝桥杯真题解析100讲&#xff0c;这是超平老师解读Scratch蓝桥真题系列的第90讲。 蓝桥杯选拔赛每一届都要举行4~5次&#xff0c;和省赛、国赛相比&#xff0c;题目要简单不少&#xff0c;再加上篇幅有限&#xff0c;因此我精挑细选…

JCTC:基于PWmat中的混合溶剂模型精确计算离子溶解自由能

溶液环境中溶质离子或中间体的自由能计算是电化学研究中最棘手的问题之一。目前单纯的实验手段并不能对发生在溶液中的化学反应过程/机理进行直接探测&#xff0c;许多信息仍主要依赖于理论模拟。对于这一问题&#xff0c;目前很多研究者采用经验势场的溶剂模型方法&#xff0c…

Casein-PEG-Rhodamine B 络蛋白-聚乙二醇-罗丹明B Casein-RB

产品名称&#xff1a;络蛋白-聚乙二醇-罗丹明B 英文名称&#xff1a;Casein-PEG-Rhodamine B 质量控制&#xff1a;95% 原料分散系数PDI&#xff1a;≤1.05 存储条件&#xff1a;-20C&#xff0c;避光&#xff0c;避湿 用 途&#xff1a;仅供科研实验使用&#xff0c;不用于诊…

SAP 电商云 Spartacus UI Configurable Product 的页面设置

关键字 CPQ&#xff0c;Product Configuration&#xff0c;Product Configure&#xff0c;Product Variant 变体是在某些方面彼此不同但基于相同基本模型的产品。 变体的一个示例是 T 恤的颜色和尺寸。 在 Spartacus 中启用变体功能&#xff0c;并在 SAP Commerce Cloud 中配…

基于python的pulp库使用,从基础模型到复杂模型,从一维变量到二维变量

写在前面 学习笔记&#xff0c;仅作参考。 个人觉得配合步骤和建模&#xff0c;直接看代码就能入门pulp&#xff0c;所以没有啥解释&#xff0c;见谅。 参考 https://blog.csdn.net/youcans/article/details/116371416 步骤 1、安装PuLp &#xff08;pip install pulp) 2…

HRD特征及其检测方法简介

HRD特征及其检测方法简介1、HRD背景知识介绍1.1 HRR通路简介1.2 HRR基因突变可导致通路失活和HRD1.3 HRD高发癌种2、HRD的两类主要标志物2.1 致病基因2.2 基因组瘢痕3、HRD检测方法4、全景变异分析&#xff08;CGP&#xff09;5、关键信息6、参考文件1、HRD背景知识介绍 1.1 H…

(4)点云数据处理学习——其它官网例子

1、主要参考 &#xff08;1&#xff09;视频&#xff0c;大佬讲的就是好啊 【Open3D】三维点云python教程_哔哩哔哩_bilibili &#xff08;2&#xff09;官方的github地址 GitHub - isl-org/Open3D: Open3D: A Modern Library for 3D Data Processing &#xff08;3&#…

BUUCTF Misc 被偷走的文件 snake

被偷走的文件 下载文件 wireshark打开&#xff0c;搜索flag字符串 可以看到一个带有flag.rar的FTP包进行TCP流追踪 看来流量中有flag.rar&#xff0c;使用kali中的foremost进行文件分离 发现一个文件夹内有一个需要密码的压缩包 密码是5790&#xff0c;解压 得到flag …

Redis数据结构和类型

Redis 包含五种数据类型&#xff0c;分别为String、List、Hash、Set、ZSet 底层实现的数据结构包SDS、双向链表、压缩列表、哈希表、整数集合、跳表 redis结构图数据类型和数据结构的关系Redis六种数据结构 一、动态字符串(SDS) Redis 是用 C 语言实现的&#xff0c;但是它…

Kotlin高仿微信-第12篇-单聊-图片

Kotlin高仿微信-项目实践58篇详细讲解了各个功能点&#xff0c;包括&#xff1a;注册、登录、主页、单聊(文本、表情、语音、图片、小视频、视频通话、语音通话、红包、转账)、群聊、个人信息、朋友圈、支付服务、扫一扫、搜索好友、添加好友、开通VIP等众多功能。 Kotlin高仿…