技术标签: RTMP Android RTMP Android
0 . 资源和源码地址 :
1. 搭建 RTMP 服务器 : 下面的博客中讲解了如何在 VMWare 虚拟机中搭建 RTMP 直播推流服务器 ;
2. 准备视频编码的 x264 编码器开源库 , 和 RTMP 数据包封装开源库 :
【Android RTMP】RTMPDumb 源码导入 Android Studio ( 交叉编译 | 配置 CMakeList.txt 构建脚本 )
【Android RTMP】Android Studio 集成 x264 开源库 ( Ubuntu 交叉编译 | Android Studio 导入函数库 )
3. 讲解 RTMP 数据包封装格式 :
4. 图像数据采集 : 从 Camera 摄像头中采集 NV21 格式的图像数据 , 并预览该数据 ;
【Android RTMP】Android Camera 视频数据采集预览 ( 视频采集相关概念 | 摄像头预览参数设置 | 摄像头预览数据回调接口 )
【Android RTMP】Android Camera 视频数据采集预览 ( NV21 图像格式 | I420 图像格式 | NV21 与 I420 格式对比 | NV21 转 I420 算法 )
【Android RTMP】Android Camera 视频数据采集预览 ( 图像传感器方向设置 | Camera 使用流程 | 动态权限申请 )
5. NV21 格式的图像数据编码成 H.264 格式的视频数据 :
【Android RTMP】x264 编码器初始化及设置 ( 获取 x264 编码参数 | 编码规格 | 码率 | 帧率 | B帧个数 | 关键帧间隔 | 关键帧解码数据 SPS PPS )
【Android RTMP】x264 图像数据编码 ( Camera 图像数据采集 | NV21 图像数据传到 Native 处理 | JNI 传输字节数组 | 局部引用变量处理 | 线程互斥 )
【Android RTMP】x264 图像数据编码 ( NV21 格式中的 YUV 数据排列 | Y 灰度数据拷贝 | U 色彩值数据拷贝 | V 饱和度数据拷贝 | 图像编码操作 )
6. 将 H.264 格式的视频数据封装到 RTMP 数据包中 :
【Android RTMP】RTMPDump 封装 RTMPPacket 数据包 ( 封装 SPS / PPS 数据包 )
【Android RTMP】RTMPDump 封装 RTMPPacket 数据包 ( 关键帧数据格式 | 非关键帧数据格式 | x264 编码后的数据处理 | 封装 H.264 视频数据帧 )
【Android RTMP】RTMPDump 推流过程 ( 独立线程推流 | 创建推流器 | 初始化操作 | 设置推流地址 | 启用写出 | 连接 RTMP 服务器 | 发送 RTMP 数据包 )
7. 阶段总结 : 阿里云服务器中搭建 RTMP 服务器 , 并使用电脑软件推流和观看直播内容 ;
【Android RTMP】RTMP 直播推流 ( 阿里云服务器购买 | 远程服务器控制 | 搭建 RTMP 服务器 | 服务器配置 | 推流软件配置 | 直播软件配置 | 推流直播效果展示 )
【Android RTMP】RTMP 直播推流阶段总结 ( 服务器端搭建 | Android 手机端编码推流 | 电脑端观看直播 | 服务器状态查看 )
8. 处理 Camera 图像传感器导致的 NV21 格式图像旋转问题 :
【Android RTMP】NV21 图像旋转处理 ( 问题描述 | 图像顺时针旋转 90 度方案 | YUV 图像旋转细节 | 手机屏幕旋转方向 )
【Android RTMP】NV21 图像旋转处理 ( 图像旋转算法 | 后置摄像头顺时针旋转 90 度 | 前置摄像头顺时针旋转 90 度 )
9. 下面这篇博客比较重要 , 里面有一个快速搭建 RTMP 服务器的脚本 , 强烈建议使用 ;
10. 编码 AAC 音频数据的开源库 FAAC 交叉编译与 Android Studio 环境搭建 :
【Android RTMP】音频数据采集编码 ( 音频数据采集编码 | AAC 高级音频编码 | FAAC 编码器 | Ubuntu 交叉编译 FAAC 编码器 )
【Android RTMP】音频数据采集编码 ( FAAC 头文件与静态库拷贝到 AS | CMakeList.txt 配置 FAAC | AudioRecord 音频采样 PCM 格式 )
11. 解析 AAC 音频格式 :
12 . 将麦克风采集的 PCM 音频采样编码成 AAC 格式音频 , 并封装到 RTMP 包中 , 推流到客户端 :
【Android RTMP】音频数据采集编码 ( FAAC 音频编码参数设置 | FAAC 编码器创建 | 获取编码器参数 | 设置 AAC 编码规格 | 设置编码器输入输出参数 )
【Android RTMP】音频数据采集编码 ( FAAC 编码器编码 AAC 音频解码信息 | 封装 RTMP 音频数据头 | 设置 AAC 音频数据类型 | 封装 RTMP 数据包 )
【Android RTMP】音频数据采集编码 ( FAAC 编码器编码 AAC 音频采样数据 | 封装 RTMP 音频数据头 | 设置 AAC 音频数据类型 | 封装 RTMP 数据包 )
Android 直播推流流程 : 手机采集视频 / 音频数据 , 视频数据使用 H.264 编码 , 音频数据使用 AAC 编码 , 最后将音视频数据都打包到 RTMP 数据包中 , 使用 RTMP 协议上传到 RTMP 服务器中 ;
Android 端中主要完成手机端采集视频数据操作 , 并将视频数据传递给 JNI , 在 NDK 中使用 x264 将图像转为 H.264 格式的视频 , 最后将 H.264 格式的视频打包到 RTMP 数据包中 , 上传到 RTMP 服务器中 ;
首先按照 【Android RTMP】RTMP 直播推流 ( 阿里云服务器购买 | 远程服务器控制 | 搭建 RTMP 服务器 | 服务器配置 | 推流软件配置 | 直播软件配置 | 推流直播效果展示 ) 中的流程搭建服务器端 , 然后才能开始推流操作 ;
也可以按照 【Android RTMP】RTMP 直播推流服务器搭建 ( Ubuntu 18.04.4 虚拟机 ) 博客中的内容 , 在 VMWare 虚拟机中搭建 RTMP 直播推流服务器 ;
加粗样式配置说明 :
① HTTP 端口号 : 在 http server 中配置的端口号是查看 RTMP 服务器状态网址的端口号 , 如 http://47.94.36.51:8080/stat 地址中 , 就需要注明其端口号是 8080 ;
listen 8080;
② HTTP 状态查看地址 : 在 conf/nginx.conf 配置文件中配置的该选项 , 就代表了使用 http://47.94.36.51:8080/stat 地址访问即可查看当前直播推流 , 与观看直播的状态 ;
location /stat {
rtmp_stat all;
rtmp_stat_stylesheet stat.xsl;
}
③ RTMP 直播端口号 : 下面给 RTMP 服务配置 1935 端口号 , 是 RTMP 的默认端口号 , 因此这里 rtmp://47.94.36.51/myapp/0 直播地址中没有端口号 ;
④ RTMP 直播应用 : 其中 myapp 就是直播的应用名称 , rtmp://47.94.36.51/myapp/0 地址中的 myapp 就是在 rtmp 中配置的 application 应用;
rtmp {
server {
listen 1935;
application myapp {
live on;
}
}
}
1 . 手机直播推流 :
① 开始播放代码 : 向 rtmp://47.94.36.51/myapp/0 地址推流 ;
// rtmp://47.94.36.51/myapp/0
// 0 相当于 直播的 密码
// 配置好服务器后, 记录 IP 地址, 替换 47.94.36.51 IP 地址
mLivePusher.startLive("rtmp://47.94.36.51/myapp/0");
② Camera 采集画面并预览推流 : 这里注意 , 之前图像被逆时针旋转了 90 度 , 设置了图像传感器角度后 , 预览图片纠正过来了 , 但是 Camera 的图像传感器采集的 NV21 格式的图像还是被旋转了 90 度 ;
具体涉及到的图像格式 , 以及图像传感器方向 , 屏幕方向的关系 , 参考博客 【Android RTMP】Android Camera 视频数据采集预览 ( 图像传感器方向设置 | Camera 使用流程 | 动态权限申请 )
2 . 关于手机端的开发流程 :
① 首先实现 Camera 采集图像数据 :
【Android RTMP】Android Camera 视频数据采集预览 ( 视频采集相关概念 | 摄像头预览参数设置 | 摄像头预览数据回调接口 )
【Android RTMP】Android Camera 视频数据采集预览 ( 图像传感器方向设置 | Camera 使用流程 | 动态权限申请 )
【Android RTMP】Android Camera 视频数据采集预览 ( 图像传感器方向设置 | Camera 使用流程 | 动态权限申请 )
② 理解 NV21 格式的图像数据 :
【Android RTMP】RTMP 数据格式 ( FLV 视频格式分析 | 文件头 Header 分析 | 标签 Tag 分析 | 视频标签 Tag 数据分析 )
【Android RTMP】RTMP 数据格式 ( FLV 视频格式分析 | AVC 序列头格式解析 )
③ 将 NV21 格式的图像数据编码为 H.264 格式的图像数据 :
【Android RTMP】x264 编码器初始化及设置 ( 获取 x264 编码参数 | 编码规格 | 码率 | 帧率 | B帧个数 | 关键帧间隔 | 关键帧解码数据 SPS PPS )
Android RTMP】x264 图像数据编码 ( Camera 图像数据采集 | NV21 图像数据传到 Native 处理 | JNI 传输字节数组 | 局部引用变量处理 | 线程互斥 )
【Android RTMP】x264 图像数据编码 ( NV21 格式中的 YUV 数据排列 | Y 灰度数据拷贝 | U 色彩值数据拷贝 | V 饱和度数据拷贝 | 图像编码操作 )
④ 将编码后的 H.264 格式的视频帧数据打包成 RTMP 数据包 :
【Android RTMP】RTMPDump 封装 RTMPPacket 数据包 ( 封装 SPS / PPS 数据包 )
【Android RTMP】RTMPDump 封装 RTMPPacket 数据包 ( 关键帧数据格式 | 非关键帧数据格式 | x264 编码后的数据处理 | 封装 H.264 视频数据帧 )
⑤ 将 RTMP 数据包发送到服务器端 :
【Android RTMP】RTMPDump 推流过程 ( 独立线程推流 | 创建推流器 | 初始化操作 | 设置推流地址 | 启用写出 | 连接 RTMP 服务器 | 发送 RTMP 数据包 )
电脑端使用 EVPlayer 观看直播 : 先配置直播地址 , 然后即可观看直播 ;
① 配置直播地址 : rtmp://47.94.36.51/myapp/0 . 这是手机端设置的直播地址 , myapp 表示服务器端的 Nginx 服务器配置的应用 , 端口号是 1935 , RTMP 默认端口号就是 1935 , 这里可以不写 ;
② 电脑端观看直播效果展示 : 屏幕画面被逆时针旋转了 90 度 , 这是因为之前摄像头传感器只设置了将预览画面纠正过来 , 但是 NV21 格式的图像数据还是被逆时针旋转了 90 度的数据 ;
具体涉及到的图像格式 , 以及图像传感器方向 , 屏幕方向的关系 , 参考博客 【Android RTMP】Android Camera 视频数据采集预览 ( 图像传感器方向设置 | Camera 使用流程 | 动态权限申请 )
查看服务器端状态信息 : 查看地址 http://47.94.36.51:8080/stat , 可以看到有一个 publishing 推流端 , 有一个 playing 观看直播端 ;
① 服务器端 : 服务器端是 Nginx 服务器 , 运行了 RTMP Module 应用 , 可以实现直播推流中功能 ;
② 推流端 : 直播推流端就是手机 , 手机端 Camera 采集 NV21 格式的图像数据 , 并使用 x264 将其编码为 H.264 格式 , 最后使用 RTMPDump 将 H.264 数据帧编码为 RTMP 数据包 , 推送到 RTMP 服务器端 ;
③ 播放端 : 直播内容播放端就是电脑上使用 EVPlayer 观看直播 ;
这篇文章主要介绍了Python+Socket实现基于TCP协议的客户与服务端中文自动回复聊天功能,结合实例形式分析了Python+Socket实现带自动回复功能的TCP聊天程序相关操作方法与注意事项,需要的朋友可以参考下具体如下:【吐槽】网上的代码害死人,看着都写的言之凿凿,可运行就是有问题。有些爱好代码、喜欢收藏代码的朋友,看到别人的代码就粘贴复制过来。可是起码你也试试运行看啊大哥【正...
你是否还在为嵌入式开发头疼,是否还在为找不到一个很好的参考指导而迷茫,是否还在为一个小小的bug不能修复而失眠,来吧,嵌入式程序猿网络培训班给你实战化的指导和培训,使你不...
搭建环境:windo server 2012方案:服务器端:gitblit。下载地址:http://www.gitblit.com/客户端:git for windows。下载地址:https://git-scm.com/downloads具体步骤:服务器端:1.下载jdk。下载地址:http://rj.baidu.com/soft/detail/17531.htm
最近一位老哥一直有一个困惑,为啥全网都在劝退客户端开发?作为从事客户端开发5年的老鸟,在过去的一段时间还是享受到了对应的差别福利。正如网上所说的,如果是想在十级之前压人,就选择客户端开发,想在大后期发力就选择服务器端开发。而现在出现的问题在于客户端就业面越来越小,晋升也比较困难,被其他技术侵占了就业岗位,可能是出现劝退的主要原因!而就我个人而言,一直觉得无论选择哪个方向,只要把技术用到极致,都能让你衣食无忧,只是这样的人在现在的市场上很少罢了。但人要恰饭,正如老哥他说的做了五年客户端开发了,现在想转服务
本文转载于 http://www.doxer.org/learn-linux/install-driver-for-rtl8111d-of-mother-board-ga-880gm-d2h-on-solaris10/#more-590 I’ve installed solaris10 on my DIY computer which has a mother board of
import java.io.File;import java.io.FileOutputStream;import java.io.IOException;import java.io.InputStream;import java.util.List;import org.apache.commons.fileupload.FileItem;import org.apache.commons....
一.冒泡排序冒泡排序思想: 两两比较,大的往后放,第一次比较完毕最大值出现在最大索引处....冒泡排序基本概念是: 依次比较相邻的两个数,将小数放在前面,大数放在后面。 即在第一趟:首先比较第1个和第2个数,将小数放前,大数放后。 然后比较第2个数和第3个数,将小数放前,大数放后,如此继续, 直至比较最后两个数,将小数放前,大数放后。至此第一趟结束, 将最大的数放到了最后。在第二趟:仍从...
创建CA证书(1)查看openssl的配置文件openssl.cnf的存放位置(即openssl的安装位置)openssl version -a2)查看openssl的配置文件openssl.cnf,因为配置文件中对证书的名称和存放位置等相关信息都做了定义。vim /usr/lib/ssl/openssl.cnf(3)创建为根证书CA所需的目录及文件...
代码如下: # 查询条件 <a-form layout="inline"> <a-row :gutter="48"> <template v-if="advanced"> <a-col :md="8" :sm="24"> <a-form-item label="id"> <a-input v-model="queryPara
一、mongo数据指令1.创建数据库/切换到某个数据库 use 数据库名2.查看数据库 show dbs3.查看当前在某个数据库下 db4.创建数据表 db.createCollection(“集合名”) 集合名即是表名5.删除数据库 db.dropDatabase()6.查看数据表 show ...
1、什么是 dockerfile2、docker镜像制作的工作逻辑3、Dockerfile的基本结构4、Dockerfile格式 案例:5、Build镜像
1.为什么写?网上教程一抓一大把,有的能重复,有的不能重复不了,很多原因。别人能做的不代表你能复制,实践出真知。不做搬运工,只写有用的,防止以后忘记。每个人理解不同,记录下来,供自己今后参考,顺便分享他人。2.GSEA基本概念Gene Set Enrichment Analysis思路:使用预定义的基因集(通常来自功能注释或先前实验的结果),将基因按照在两类...