音视频开发—RTMP推流详解

news2024/10/23 2:51:22

RTMP(Real-Time Messaging Protocol,实时消息传输协议)是一种用于音视频和数据在互联网进行实时传输的协议,最初由Macromedia(现Adobe)开发,用于与Adobe Flash Player进行通信。RTMP被广泛用于流媒体传输,特别是在直播和点播视频领域。以下是RTMP协议的详细介绍:

RTMP协议的基本原理

RTMP协议是基于TCP的协议,通过分段传输数据以实现低延迟的实时传输。其主要功能是支持多路复用和流控制,使音视频数据可以同步传输并在接收端及时播放。

RTMP的基本结构

RTMP协议将数据分为消息(Message)和消息流(Message Stream),并在较低层次上定义了Chunk(块)的概念。

  • Chunk:RTMP数据传输的基本单位,一个大消息可以被分割成多个Chunk以便传输。
  • Message:由多个Chunk组成,表示一个完整的RTMP数据单元,比如音频数据、视频数据或控制信息。
  • Message Stream:用来传输一系列相关的消息,比如一个音频流或一个视频流。

RTMP协议的通信过程

在这里插入图片描述

RTMP协议的通信过程分为以下几个阶段:

  • 握手阶段:客户端和服务器首先进行握手以建立连接,完成版本和时间戳的同步。

握手过程 官方文档示例如下:

在这里插入图片描述

RTMP 真实握手过程:

在这里插入图片描述

  • 连接阶段:握手完成后,客户端发送连接命令(connect),包括应用信息等,服务器响应连接成功或失败。

官方文档仅供参考:

在这里插入图片描述

实际抓包分析:

在这里插入图片描述

  • 创建流阶段:连接建立后,并不是发送裸数据,而是客户端请求创建一个或多个流,用于音视频数据的传输。

官方文档,仅供参考:

在这里插入图片描述

通过抓包分析:

在这里插入图片描述

  • 音视频数据传输阶段:客户端和服务器通过已经建立的流传输音频、视频和数据消息。

推流过程如下:

在这里插入图片描述

拉流过程如下:Buffer Size 播放越平滑,不易出现卡顿,但是延迟相对会较高

在这里插入图片描述

RTMP消息格式

总体框图如下:

在这里插入图片描述

RTMP消息格式主要由以下几个部分组成:

1. Chunk(块)格式

RTMP协议使用Chunk来分割和传输数据。Chunk是RTMP数据传输的基本单位,一个消息可以被分割成多个Chunk传输。每个Chunk包含以下几个部分:

  • Basic Header:包含Chunk Stream ID和Chunk的基本信息。
  • Message Header:包含消息的元数据,比如时间戳、消息长度、消息类型等。
  • Extended Timestamp(可选):用于扩展时间戳,当时间戳超过24位时使用。
  • Message Data:实际的数据内容。
Basic Header

Basic Header由1到3个字节组成:

  • 第1字节

    :格式(Format)和Chunk Stream ID(CSID)。

    • Format:2位,表示Chunk的格式。
    • CSID:6位或更长,表示Chunk流ID。

如果CSID为0,则需要使用1个额外字节表示CSID(范围为64-319)。如果CSID为1,则需要使用2个额外字节表示CSID(范围为64-65599)。

Message Header

Message Header的长度取决于Basic Header中的Format字段,可能为0、3、7或11字节:

  • Format 0(11字节):包含时间戳、消息长度、消息类型ID、消息流ID。
  • Format 1(7字节):包含时间戳差值、消息长度、消息类型ID。
  • Format 2(3字节):仅包含时间戳差值。
  • Format 3(0字节):不包含任何头部信息,仅复用之前Chunk的头部信息。
Extended Timestamp

Extended Timestamp(4字节):仅当时间戳或时间戳差值超过24位时使用。

2. Message(消息)格式

RTMP消息包含消息头和消息体,消息头定义了消息的元数据,消息体包含实际的数据。

Message Header

消息头包含以下字段:

  • Timestamp(3字节):消息的时间戳,单位为毫秒。
  • Message Length(3字节):消息体的长度,单位为字节。
  • Message Type ID(1字节):表示消息的类型,比如音频、视频、命令等。
  • Message Stream ID(4字节):表示消息流的ID。
Message Body

消息体是实际的数据内容,其长度由消息头中的Message Length字段指定。

3. 消息类型

RTMP定义了多种消息类型,每种类型都有特定的用途:

  • Audio Message(8):用于传输音频数据。
  • Video Message(9):用于传输视频数据。
  • Data Message(18):用于传输元数据或自定义数据,比如时间戳、脚本数据等。 RMTP命令消息
  • Command Message(20):用于命令和控制消息,比如连接、发布、播放等。RTMP命令消息
  • User Control Message(4):用于用户控制事件,比如流开始、流结束、Ping等。
  • Aggregate Message(22):用于聚合多个消息成一个传输。
  • Set Chunk Size(1):控制消息
  • Abort Message(2):控制消息

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1844119.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

成都晨持绪:新手开抖音网店什么品好做

在如今这个互联网高速发展的时代,抖音作为一款流行的短视频平台,已经成为许多创业者开展线上业务的首选之地。对于刚入行的新手来说,开设一个抖音网店既是一个机遇也是挑战,选择什么样的商品销售成为成功的关键因素之一。 首要的是…

数据库异常恢复2-备份文件恢复(快速恢复的手动启动方式)

(四) 备份文件备份恢复的概念 本次所说的数据恢复有异于数据的导入导出 1. 备份工具 gbase8s数据库提供了两种工具进行完成系统物理备份、逻辑日志备份和系统恢复:ontape和onbar ontape:提供了基本的系统物理备份、日志备份和恢复能力,其…

java实现分类下拉树,点击时对应搜索---后端逻辑

一直想做分类下拉,然后选择后搜索的页面,正好做项目有了明确的需求,查找后发现el-tree的构件可满足需求,数据要求为:{ id:1, label:name, childer:[……] }形式的,于是乎,开搞! 一…

QT自定义标题栏窗口其二:实现拖动及可拉伸效果 + 顶部全屏/侧边半屏

1、效果 2、核心代码 #include "widget.h" #include "ui_widget.h"Widget::Widget(QWidget *parent): QWidget(parent<

管理咨询公司的五个招聘秘密

在管理咨询中&#xff0c;人是业务&#xff1b;客户支付数百万美元&#xff0c;要求管理顾问确认问题&#xff0c;并推荐解决方案。由于收入和合规性受到威胁&#xff0c;招聘错误的成本可能非常昂贵&#xff0c;一些公司更倾向于谨慎而不是效率。然而&#xff0c;在当今竞争激…

掌握大型语言模型的 7 个基本步骤

介绍 LLMs 正在改变我们今天与科技互动的方式。这些人工智能程序能够理解和模仿人类语言。它们可以应用于数据分析、客户服务、内容创作和其他领域。但对于新手来说&#xff0c;了解如何使用它们似乎很有挑战性。本文将引导读者了解掌握大型语言模型的 7 个基本步骤。 本文还…

ROM以及ROM与RAM对比

1.ROM ROM最原始的定义是“只读存储器”&#xff0c;一旦写入原始信息则不能更改。所以ROM通常用来存放固定不变的程序、常数和汉字字库&#xff0c;甚至用于操作系统的固化。它与随机存储器可共同作为主存的一部分&#xff0c;统一构成主存的地址域。 现在已经发展出了很多R…

AI 情感聊天机器人之旅 —— 相关论文调研

开放域闲聊场景 Prompted LLMs as Chatbot Modules for Long Open-domain Conversation 发布日期&#xff1a;2023-05-01 简要介绍&#xff1a;作者提出了 MPC&#xff08;模块化提示聊天机器人&#xff09;&#xff0c;这是一种无需微调即可创建高质量对话代理的新方法&…

6.20学习总结

D - 刻录光盘https://vjudge.net/problem/%E6%B4%9B%E8%B0%B7-P2835 思路&#xff1a; 利用并查集和弗洛伊德&#xff0c;对需要传递的对象都进行标记&#xff0c;经过处理后使他们的父亲发生相应的改变&#xff0c;最后对数组进行查询累加即可 代码&#xff1a; #include<…

【前端项目笔记】4 权限管理

权限管理 效果展示&#xff1a; &#xff08;1&#xff09;权限列表 &#xff08;2&#xff09;角色列表 其中的分配权限功能 权限列表功能开发 新功能模块&#xff0c;需要创建新分支 git branch 查看所有分支&#xff08;*表示当前分支&#xff09; git checkout -b ri…

【第22章】Vue实战篇之文章分类

文章目录 前言一、文章分类列表查询1. 界面2. 脚本3. 展示 二、文章分类添加1. 界面2. 接口脚本3. 点击事件 三、文章分类编辑1. 界面2. 接口脚本3. 点击事件 四、文章分类删除1. 界面2. 接口脚本3. 点击事件 总结 前言 这里来学习文章分类相关界面和接口的调用(增删改查)。 一…

Java 笔记:常见正则使用

文章目录 Java 笔记&#xff1a;常见正则使用正则简介常用匹配年月日的时间匹配手机号码校验 参考文章 Java 笔记&#xff1a;常见正则使用 正则简介 正则表达式定义了字符串的模式。 正则表达式可以用来搜索、编辑或处理文本。 正则表达式并不仅限于某一种语言&#xff0c;但…

在Maven工程中手动配置并测试SpringBoot(巨详)

本篇博客承继自博客&#xff1a; 在IDEA 2024.1.3 (Community Edition)中创建Maven项目_idea2024.1.3如何创建maven项目-CSDN博客 配置POM文件 打开工程中的pom.xml文件&#xff0c;先向其中写入 <parent><groupId>org.springframework.boot</groupId><…

Adams 插件Plugin二次开发教程

通过cmd或python开发的Adams程序&#xff0c;可以通过执行cmd&#xff08;python&#xff09;命令的方式直接运行&#xff0c;也可以根据cmd教程中提供的创建菜单和对话框的方式调用这些程序&#xff0c;当然更合适的方式是通过插件的方式对二次开发的程序进行管理&#xff0c;…

Openldap集成Kerberos

文章目录 一、背景二、Openldap集成Kerberos2.1kerberos服务器中绑定Ldap服务器2.1.1创建LDAP管理员用户2.1.2添加principal2.1.3生成keytab文件2.1.4赋予keytab文件权限2.1.5验证keytab文件2.1.6增加KRB5_KTNAME配置 2.2Ldap服务器中绑定kerberos服务器2.2.1生成LDAP数据库Roo…

MicroPython+ESP32 C3+ST7735S LCD屏 WIFI联网显示实时时间

案例地址&#xff1a;https://gitee.com/whltaoin_admin/MP_ESP32_ST7735S- 展示效果 ESP32LCD屏 WIFI联网并显示实时时间 TFT LCD模块参数介绍 名称&#xff1a;1.8 128*160 RGB_TFT驱动芯片&#xff1a;ST7735S ESP32 C3 参数介绍&#xff08;经典款&#xff09; 外观及…

LeetCode 算法:两两交换链表中的节点 c++

原题链接&#x1f517;&#xff1a;两两交换链表中的节点 难度&#xff1a;中等⭐️⭐️ 题目 给你一个链表&#xff0c;两两交换其中相邻的节点&#xff0c;并返回交换后链表的头节点。你必须在不修改节点内部的值的情况下完成本题&#xff08;即&#xff0c;只能进行节点交…

sqlcoder实践

背景 Defog llama-3 意义 翻译自然语言到sql&#xff0c;类似脑机接口&#xff0c;大模型重要应用领域 sql是数据库查询标准;关系数据库&#xff0c;工具(datax,sqoop&#xff0c;logstash,hive)&#xff0c;非关系数据库&#xff08;MongoDB&#xff0c;图数据库&#xff…

安装Xshell和Xftp后,打开程序下无法使用,要继续使用此程序,您必须应用最新的更新或使用新版本。

之前我遇到这种情况的时候&#xff0c;修改了nslicense.dll&#xff0c;结果这次重新下载结果把修改代码给忘了&#xff08;因为我也不会这个&#xff09;&#xff0c;于是我用了最直接的办法去官网找最新版本下载&#xff1a;xshell/xftp官网 后面直接点下载&#xff0c;然后开…

网络编程5----初识http

1.1 请求和响应的格式 http协议和前边学过的传输层、网络层协议不同&#xff0c;它是“一问一答”形式的&#xff0c;所以要分为请求和响应两部分看待&#xff0c;同时&#xff0c;请求和响应的格式是不同的&#xff0c;我们来具体介绍一下。 1.1.1 请求 在介绍请求之前&…