Android平台FFmpeg实现rtmp推流-C++的实现

视频编码有几种方式：

1.硬编码，使用MediaCodec实现

2.软编码，使用FFmpeg或者libx264库来实现。

本文分享在Android平台视频编码-软编码散大老的实现，也就是用FFmpeg来实现视频的编码，rtmp推流到服务器上，相机采集视频将在下一篇文章分享。

流媒体服务器使用 nginx-rtmp-module 来进行搭建。

本文所使用FFmpeg的版本是4.1，关于FFmpeg编译成Android平台so库如果有需要，我将在下一篇文章分享说明。

视频编码比较耗cpu，上传视频数据的会耗网络io，所以需要开启新线程去处理，这里我用HandlerThread来处理仿扰视频的编码上传。

初始化编码相关 *** 作

这里我们使用的是FFmpeg,所以在编码前我们会先做一些初始化以及参数设置工作。

FFmpeg初始化

av_register_all()

创建输出格式上下文

avformat_alloc_output_context2()

获取编码器

avcodec_find_encoder(AV_CODEC_ID_H264) 获取H264的编码器

设置编码器参数

使用给定的编码器和参数初始化编码上下文

avcodec_open2(pCodecCtx, pCodec, &param)

创建视频流

video_st = avformat_new_stream(ofmt_ctx, pCodec)

打开输出上下文

avio_open(&ofmt_ctx->pb, out_path, AVIO_FLAG_READ_WRITE)

写入输出头信息

avformat_write_header(ofmt_ctx, NULL)

像素格式转换

AV_PIX_FMT_YUV420P，它是纯平面存储。总共三个平面，分别存放，Y、U、V数据。

当图像宽是width，高是height时，Y分量的大小就是width×heitht,而U是width×heitht/4,V也是U是width×heitht/4。

H264编码

首先我们需要了解两个数据结构AVFrame、AVPacket

AVFrame存放的是原始数据、AVPacket存放的是编码后的数据。

创建AVPacket

av_new_packet(&enc_pkt, picture_size)

开冲升始编码

ret = avcodec_encode_video2(pCodecCtx, pFrameYUV)

输出一帧编码后的视频数据

ret = av_write_frame(pCodecCtx, &enc_pkt)

释放资源

小伙伴们有疑问的可以在下方评论区评论。

这个应用主要是将HTTP的串流转换成RTMP协议传送到Adobe Flash Media Server或Wowza Media Server的媒体服务器。

RTMP的协议有以下的参数：

RTMP: 其原始采用TCP port 1935

RTMPS: 将RTMP加载到SSL的安全机制，就类似HTTPS。

RTMPE: 采用Adobe所提供给RTMP所发展的加密版本。

RTMPT: 在RTMP上加挂he RTMP protocol 封装在HTTP请求中，可以穿越防火墙。这是一个很不错的协议，使用TCP端口80和443绕过公司对防火墙。封装的会话可能携带纯RTMP，RTMPS或RTMPE包内。

RTMP 串流

VLC 在 2.0.x版本里可以支持RTMP协议。不过，有些环境却没法执行，例如2.0.2, 2.0.3, 2.0.4, 2.0.6在Windows 2008 Server 64的服务器上确实没法执行消正液。可以开启VLC然后开启网络串流，如“RTMP://aaa.bbb.com:1935/live/串流源“，看看可否开 启。主要是VLC 2.0.x采用 ffmpeg/libav的程序库，但是， 有的包装却没法支持。所以必须先做确认。当 librtmp 的支持被启动于 ffmpeg/libav 则RTMPS才可以有功用。

VLC和RTMP的情形主要是用来捕获和转码应用程序生成一个单一的流。是通过另一个应用程序分配给多个客户端。这在Wowza是非常重要的。虽然，Wowza也支持VLC采用UDP/RTP/RTSP方式接收串流，但是，很多情况下是很不稳定的。

LC直接连接到一个的RTMP串流，如WOWZA，不听传入的请求。因此，它是不可能的，以查看的RTMP流直接从VLC。您需要连接到WOWZA，观看流。这是可以用VLC做到的：

$ vlc rtmp://rtmp.server.com:1935/path/to/stream

有件事必须提醒的。从VLC将RTMP串流传送给Wowza服务器并不是都很稳定的。有一些时间关系的“虫”会造成Wowza关闭连线。 这样的问题都是与“音频”与”视频“时间戳(Timestamp)有关系的。采用“audio-desync” 选项来整合RTMP也不是个好点子，但是清宽， 可以不断调整与修改。

Webcam RTMP streaming

以下是有关webcam的应用。其他的有采集装置、设备、视频文档等应用。

Windows 的范例

在windows的采集装置都是利用DirectShow这个界面的。在VLC的模块也是用这样的界面，成为“DirectShow“或”dshow”。以下是范例：

$ vlc dshow://"" --sout '#transcode{vcodec=h264,vb=300,fps=25,scale=1,acodec=mp4a,

ab=64,channels=2}:std{access=rtmp,mux=ffmpeg{mux=flv},dst=rtmp://rtmp.server.com:1935/path/to/stream}'

DirectShow选项也可在QT界面里采用

Linux 的范例

通常在Linux的采集装置上都是采用“video for linux” (v4l2)这个界面。使用指令方式来采集webcam装置（或称为”v4l2 装置”）送出RTMP串流的范例如下：

$ vlc v4l2:// --v4l2-fps=25 --sout '#transcode{vcodec=h264,vb=300,fps=25,scale=1,

acodec=mp4a,ab=64,channels=2}:std{access=rtmp,mux=ffmpeg{mux=flv},dst=rtmp://rtmp.server.com:1935/path/拿物to/stream}'

这个例子可以自动侦测 v4l2 装置并且选择第一个装置来采集讯号。其他的参数选项如视频标准（PAL, NTSC）、Chroma、宽度、长度等等可以自行设置。必须要注意的是，这些参数设置跟本身的设备有关。 当我门使用debug模式 (-vvv)，VLC自身的video for linux (v4l2) 模块会显示出执行时所出现的数值讯息。v4l2 模块提供以下可作为优化的选项：

–v4l2-dev=: 指定所要采集的特定装置

–v4l2-standard=: 使用哪种视频标准，例如： SECAM, PAL, NTSC and more

–v4l2-width=: 视频呈现的宽度（in pixels)

–v4l2-height=: 视频呈现的长度度（in pixels)

以上是描述有关v4l2的参数选项。完整的v4l2模块讯息，可以利用下面的指令查询。

$ vlc -H -p v4l2 --advanced

以下是另一个将http串流转码（transcode）到RTMP给Adobe Flash Media Server或Wowza Media Server等视频服务器

cvlc -I dummy http。//orginalstreamIPaddress:50014 --sout-mux-caching=5000

--sout='#transcode{venc=x264{keyint=60},vcodec=h264,vb=800}:std{access=rtmp,

mux=ffmpeg{mux=flv},dst=rtmp。//destinationIPaddress:1935/live/StreamFile}}' &

这是用ffmpeg的方法：

ffmpeg -i http。//OriginalIPAddress:50010 -vcodec libx264 -vb 800k

-acodec libfaac -ab 64k -f flv rtmp。//DestinationIPAddress:1935/live/StreamFile

一、FFmpeg推RTMP流准备工作

首先确保自已已经安装了nginx + rtmp服务器。

打开配置文件nginx.conf

完成如下配置

nginx配置.1

如果没有nginx + rtmp服务器，请阅读我的另一篇文章

Mac搭建nginx+rtmp服务器

二、FFmpeg推流

1.推流MP4文件

视频文件地址：/Users/xu/Desktop/bangbangbang.mp4

推流拉流地址：rtmp://localhost:1935/rtmplive/home

acc：RTMP的音频格式

flv： RTMP的视频格式

ffmpeg -re -i /Users/xu/Desktop/bangbangbang.mp4-vcodec libx264 -acodec aac -f flv rtmp://localhost:1935/rtmplive/home

设置推流.2

输入命令行后，暂时先不要点回车，等设置好本地拉流后，再进行推流。

2.本地拉流MP4文件

打开VLC播放器

VLC.3

设置播放地址

设置播放地址.4

设置拉流地址

rtmp://localhost:1935/rtmplive/home

拉流地址.5

开始推流，点击open后开始播放。

FFmpeg推流成功.6

推流成功!

三、用ffmpeg推流桌面以及推流摄像头进行直播

1.如果希望将桌面录制或者春大分享，可以使用命令行如下：

ffmpeg -f avfoundation -i "1" -vcodec libx264 -preset ultrafast -acodec libfaac -f flv rtmp://localhost:1935/rtmplive/home

这个只能够推桌面。

2.如果需要桌面+麦克风，比如一般做远程教育分享 命令行如下：

ffmpeg -f avfoundation -i "1:0" -vcodec libx264 -preset ultrafast -acodec libmp3lame -ar 44100 -ac 1 -f flv rtmp://localhost:1935/rtmplive/home

这个可以扒模竖推桌面+麦克风。

3.如果需要桌面+麦克风，并且还要摄像头拍摄到自己，比如一般用于互动主播，游戏主播，命令行如下

ffmpeg -f avfoundation -framerate 30 -i "1:0" \-f avfoundation -framerate 30 -video_size 640x480 -i "0" \-c:v libx264 -preset ultrafast \-filter_complex 'overlay=main_w-overlay_w-10:main_h-overlay_h-10' -acodec libmp3lame -ar 44100 -ac 1 -f flv rtmp://localhost:1935/rtmplive/home

这个可以推桌面+麦克风，并且摄像头把人头放在界面下面

Snip20160713_12.png

四、FFmpeg常用基本命令

1.分离视频音频流

ffmpeg -i input_file -vcodeccopy-an output_file_video//分离视频流ffmpeg -i input_file -acodeccopy-vn output_file_audio//分离音频流

2.视频解复用

ffmpeg–itest.mp4 –vcodeccopy–an–fm4vtest.264ffmpeg –itest.avi –vcodeccopy–an–fm4vtest.264

3.视频码拆转码

ffmpeg –i test.mp4 –vcodec h264 –s352*278–an –f m4v test.264//转码为码流原始文件ffmpeg –i test.mp4 –vcodec h264 –bf0–g25–s352*278–an –f m4v test.264//转码为码流原始文件

ffmpeg –i test.avi -vcodec mpeg4 –vtag xvid –qsame test_xvid.avi//转码为封装文件

-bf B帧数目控制

-g 关键帧间隔控制

-s 分辨率控制

4.视频封装

ffmpeg –i video_file –i audio_file –vcodeccopy–acodeccopyoutput_file

5.视频剪切

ffmpeg –i test.avi –r1–f image2 image-%3d.jpeg//提取图片ffmpeg -ss0:1:30-t0:0:20-i input.avi -vcodec copy -acodec copy output.avi//剪切视频

-r 提取图像的频率

-ss 开始时间

-t 持续时间

6.视频录制

ffmpeg –i rtsp://192.168.3.205:5555/test –vcodec copy out.avi

7.YUV序列播放

ffplay -f rawvideo -video_size1920x1080 input.yuv

8.YUV序列转AVI

ffmpeg–sw*h–pix_fmtyuv420p–iinput.yuv –vcodecmpeg4output.avi

9.常用参数说明：

主要参数：

i 设定输入流

f 设定输出格式

ss 开始时间

视频参数：

b 设定视频流量，默认为200Kbit/s-r 设定帧速率，默认为25

s 设定画面的宽与高-aspect 设定画面的比例

vn 不处理视频-vcodec 设定视频编解码器，未设定时则使用与输入流相同的编解码器

音频参数：

ar 设定采样率

ac 设定声音的Channel数

acodec 设定声音编解码器，未设定时则使用与输入流相同的编解码器an 不处理音频

---