rtsp是什么啊

最近需要做实时录屏并把视频推流到RTSP服务器，具体流程是抓取屏幕内容(bitmap)，并把bitmap转化为YUV，接着把YUV编码成H264，再把H264码流推到RTSP服务器；把采集到的PCM编码为AAC，再把AAC推流至RTSP服务器。

看了雷神的一篇文章： 最简单的基于FFmpeg的推流器（以推送RTMP为例） ，他是把本地的视频文件推流至RTMP服务器，并不符合我的要求。
接着我找到另一篇文章： ffmpeg实现H264压缩并且推流至RTSP ，这篇文章只有图像编码，并没有音频编码，并且推流之后并没有播放成功。
我综合上面两位大佬的思路，和查找一些资料实现了这个功能。

RTSP服务器使用的是 HappyTime 的免费试用版本。

我抓到的bitmap是BGRA格式的，所以使用的图像格式是 AV_PIX_FMT_BGRA ， cropImage 是含有rgba图像的数组

调用：

由于我是实时抓取的屏幕， frame_yuv->pts 设为当前的时间戳，以保证能正常播放。

调用：

调用：
其中pcm_buff是包含pcm数据的数组

使用udp传输时传到1400多帧就断开链接了，原因不明，所以改用使用tcp协议传输

延迟有15秒左右

参考：
>所谓流媒体技术，是指将连续的影像和声音信息经过压缩处理后放在网站服务器上，让用户能够一边下载一边观看、收听（即所谓的“在线欣赏”），而不需要等整
个压缩文件下载到自己的机器上才可以欣赏的网络传输技术。目前，在这个领域中的竞争者主要有微软、RealNetworks、Apple三家公司，例如微
软新近发布了Windows Media Services 9、RealNetworks公司新近发布的Helix
Platform、Apple新近发布的Darwin streaming server 41，意图在流媒体领域大干一场。
一般来说，一个完整的流媒体服务系统需要三个部分组成：编码器、流服务器和播放器。编码器通过对内容来源（如MP3文件或者麦克风输入）进行编码，并将编
码过的内容发送到流服务器；流服务器再将它们发布到Internet，这样客户端的播放器只要连接到流服务器就可以进行在线播放了。
利用Winamp架设MP3网络电台
当我们静静地在欣赏美妙的MP3音乐时，你是否曾经考虑过将这些原本属于个人的MP3音乐通过网络在局域网内进行发布，甚至还可以通过Internet进
行发布？这样就可以让遍布世界的朋友们与你一起共享MP3音乐之旅。其实，要做到这一点并不难，你只要将本机创建为一台MP3流媒体服务器，将自己所喜爱
的MP3音乐不停播放，然后通知朋友们访问你的这台MP3服务器就可以了。
说起MP3的播放，使用最广泛的莫过于Winamp了。对于MP3流媒体服务这个领域，Winamp的开发者Nullsoft公司当然不会放弃，专门发布
了面向MP3的流服务器SHOUTcast Server。虽然它的功能没有Windows Media Server和Real
Server强大，但它不仅对硬件的要求极低，更关键的是完全免费，使用起来没有后顾之忧。另外你还需要下载一个名为SHOUTcast DSP
Plug-in的插件，只有安装了这个不起眼的插件，Winamp才能支持流媒体服务。
首先打开Winamp（请注意版本号必须在222以上），切换到“Options” | “Preferences”|
“DSP/Effect”标签页，选中“Nullsoft SHOUTcast Source DSP
v182a[dsp_scdll]”下的“Configure”按钮。打开“SHOUTcast
Source”窗口，选择“Output”标签页，如图1所示，在“Address”栏内填入本机的IP地址。如果你想在Internet上广播MP3音
乐，则必须键入本机的外部IP地址，然后就可以从程序组中运行SHOUTcast
DAAS（GUI）程序以启动SHOUTcast服务。这时系统会自动连接到服务器，接下来请返回图1窗口点击“Connect”按钮。如果连接成功，该
按钮会变为“disconnect”字样，这样我们就完成了在本机架设MP3流服务器的全部过程。
架设REAL格式的视频点播中心
如果是架设视频点播服务器，那么选择Real格式是非常明智的。因为RealProducer Plus这款功能强大的软件 *** 作相当简单，每次使用时会d出一个向导对话框进行 *** 作提示。目前最新版本是100，我们只要选择851以上的版本即可。
从“工具”菜单下选择“创建网页”命令，此时会d出一个如图2所示的向导式对话框，点击“前进”按钮选择你希望用于创建Web页面的Real多媒体文件。
随后RealProducer会询问是创建“d出式播放器”还是“嵌入式播放器”，一般建议选择后者，因为这样所需要的系统资源更低，当然启动速度也更
快。至于播放器的界面，可以选择“标准播放器”，很快就可以创建成功。
最后，RM文件对象所在的目录会增加一些文件，请将这些文件与RM对象一起上传，不过要注意保证RM文件与HTML文件在同一目录下，否则播放器可能无法找到播放对象。
架设WMP流媒体服务器
微软的手伸得很长，什么领域都要插足一下。凭借着Windows *** 作系统的影响力，Windows Media Player市场占有率越来越高，而微软的asf、wmv、wma、avi等格式也开始被越来越多的用户所接受。
架设WMP流媒体服务器，你需要安装Windows Media
Encoder才行，目前最新版本是90简体中文版。如图3所示，我们应该在这里选择“广播实况事件”，接着选择用来编码的音频和视频设备。注意请事先
将音频和视频设备与计算机正确连接，否则会无法检测到。接着你还需要指定服务和发布点，当然也可以使用现有的发布点。然后Windows Media
Encoder会自动创建服务器，并给出>您需要安装Flash播放器，流媒体服务器软件

基于流协议（RTP / RTSP，MMS，RTMP，等）的流媒体服务器软件的主要功能的视频文件传输到客户端的在线观看，视频采集，压缩，软件接收实时视频流，实时流媒体协议的客户端。
典型的流媒体服务器的Microsoft Windows媒体服务（WMS），它使用MMS协议接收和发送视频使用Windows Media Player（WMP）的前端播放器，RealNetworks公司的Helix服务器，RTP / RTSP协议，接收和发送视频播放器的前端，Adobe公司的Flash媒体服务器使用RTMP（RTMPT / RTMPE / RTMPS）协议接收和发送视频，Real播放器，Flash播放器，播放器的前端。这是值得注意的，Adobe公司的Flash播放器（点击官方数据的普及的闪存播放器安装容量已达到99％以上），越来越多的网络视频开始到使用Flash播放器的播放器前端，所以越来越多的企业开始采用Flash播放器兼容的流媒体服务器，并开始消除其他类型的流媒体服务器。 Flash播放器，除了Adobe Flash媒体服务器，流媒体服务器有一个用Java编写的名为Red5的开源软件，在中国制造的有一个叫Ultrant的Flash Media Server的软件，说是很不错的，最新版本的到版本187，可以下载一个免费的社区版。

ffmpeg

全平台视频转换

开源

RED5

Red5是一个采用Java开发开源的Flash流媒体服务器。它支持：把音频（MP3）和视频（FLV）转换成播放流； 录制客户端播放流（只支持FLV）；共享对象；现场直播流发布；远程调用。Red5使用RSTP作为流媒体传输协议，在其自带的一些示例中演示了在线录制，flash流媒体播放，在线聊天，视频会议等一些基本功能。

开源地址：[](>

Darwin Streaming Server

为苹果公司视频流解决方案的开源版本。

easyDarwin

国内基于Darwin Streaming Server二次开发的流媒体服务器，有中文支持网站。

流媒体服务器是播放 上载下载管理播出直播视频等网上节目素材的一套管理系统，只要是网上视频的都必须有流媒体服务器
流媒体服务器的主要功能是以流式协议（RTP/RTSP、MMS、RTMP等）将视频文件传输到客户端，供用户在线观看；也可从视频采集、压缩软件接收实时视频流，再以流式协议直播给客户端。典型的流媒体服务器有微软的Windows Media Service（WMS），它采用MMS协议接收、传输视频，采用Windows Media Player（WMP）作为前端播放器；RealNetworks公司的Helix Server，采用RTP/RTSP协议接收、传输视频，采用Real Player作为播放前端；Adobe公司的Flash Media Server,采用RTMP(RTMPT/RTMPE/RTMPS)协议接收、传输视频，采用Flash Player作为播放前端。值得注意的是，随着Adobe公司的Flash播放器的普及（根据Adobe官方数据，Flash播放器装机量已高达99%以上），越来越多的网络视频开始采用Flash播放器作为播放前端，因此，越来越多的企业开始采用兼容Flash播放器的流媒体服务器，而开始淘汰其他类型的流媒体服务器。支持Flash播放器的流媒体服务器，除了Adobe Flash Media Server，还有Ultrant Flash Media Server流媒体服务器软件，以及基于Java语言的开源软件Red5。

---