Android平台RTMP推送模块的设计意义

​为什么要做RTMP推送

RTMP是一种广泛使用的流媒体传输协议，它允许视频和音频数据在互联网上实时、高效地传输。实现RTMP推送功能，主要是为了满足以下需求：

1. 实时性要求：RTMP协议具有低延迟的特点，适合用于需要实时交互的场景，如直播、视频会议等。通过RTMP推送，观众可以几乎实时地观看到主播的内容，增强用户体验。
2. 兼容性考虑：RTMP协议已经被众多流媒体服务器和播放器所支持，具有较高的兼容性。使用RTMP推送，可以确保内容能够顺利地被不同的设备和平台所接收和播放。
3. 稳定性与可靠性：RTMP协议在传输过程中会进行一定的错误控制和丢包重传，从而提高传输的稳定性和可靠性。这对于保证直播质量至关重要。
4. 可扩展性：随着直播行业的不断发展，对推流技术的要求也越来越高。RTMP推送技术可以根据实际需求进行扩展和优化，以支持更高清、更低延迟的直播传输。
5. 集成便利性：许多直播SDK都提供了RTMP推送的接口和示例代码，使得开发者能够相对容易地将RTMP推送功能集成到自己的应用中，降低了开发难度和成本。

如何实现Android平台RTMP推送模块对接

2005年，我们做Android平台RTMP推送模块的初衷，是为了满足传统行业如应急指挥、巡检等场景的低延迟视音频传输，达到远程指挥的目的。做好了RTMP推送模块，发现现有的RTMP播放都不足以满足我们毫秒级的延迟诉求，继续自研框架，做了RTMP的直播播放器。

本文以大牛直播SDK的Android平台RTMP直播推送模块为例。涵盖了准备工作、接口设计、数据对接、RTMP推送以及扩展功能等方面。

Android平台RTMP推送模块功能设计：

• 音频编码：AAC/SPEEX；
• 视频编码：H.264、H.265；
• 推流协议：RTMP；
• [音视频]支持纯音频/纯视频/音视频推送；
• [摄像头]支持采集过程中，前后摄像头实时切换；
• 支持帧率、关键帧间隔(GOP)、码率(bit-rate)设置；
• 支持RTMP推送 live|record模式设置；
• 支持前置摄像头镜像设置；
• 支持软编码、特定机型硬编码；
• 支持横屏、竖屏推送；
• 支持Android屏幕采集推送；
• 支持自建标准RTMP服务器或CDN；
• 支持断网自动重连、网络状态回调；
• 支持实时动态水印；
• 支持实时快照；
• 支持降噪处理、自动增益控制；
• 支持外部编码前音视频数据对接；
• 支持外部编码后音视频数据对接；
• 支持RTMP扩展H.265（需设备支持H.265特定机型硬编码）和Enhanced RTMP；
• 支持实时音量调节；
• 支持扩展录像模块；
• 支持Unity接口；
• 支持H.264扩展SEI发送模块；
• 支持Android 5.1及以上版本。

1. 技术背景与功能特点：
   • 跨平台支持：支持Windows、Linux（x64_64架构|aarch64）、Android、iOS平台。
   • 数据源支持：支持采集推送摄像头、屏幕、麦克风、扬声器数据，以及编码前、编码后的音视频数据对接。
   • 性能优异：配合SmartPlayer播放器，实现毫秒级延迟体验，满足多种行业使用场景。
2. 准备工作：
   • 权限配置：确保在Android项目中添加了必要的权限，如相机、麦克风等。
   • Gradle配置：配置32/64位库，指定需要构建的ABI（armeabi-v7a, arm64-v8a, x86, x86_64）。
   • 应用名称修改：在strings.xml中修改app_name以适配集成测试。
3. 接口设计：
   • 初始化推送实例：SmartPublisherOpen接口用于初始化推送实例，可配置音频和视频选项。
   • 事件回调：SetSmartPublisherEventCallbackV2设置事件回调，用于处理推送过程中的各种事件。
   • 编码设置：提供硬编码检测（H.264、H.265）和设置接口，如SetSmartPublisherVideoHWEncoder、SetSmartPublisherVideoHevcHWEncoder。
   • 数据对接：提供多种数据接口，如SmartPublisherOnCaptureVideoData、SmartPublisherOnYV12Data等，用于对接不同格式的音视频数据。
4. 实时数据传递：
   • 视频数据：支持YUV420SP/YUV420P/RGBA/ARGB等格式的编码前视频数据，以及H.264编码后的视频数据。
   • 音频数据：支持PCM、AAC/PCMA/PCMU/SPEEX等格式的音频数据。
   • 数据转换：提供数据转换接口，如SmartPublisherNV21ToI420Rotate，用于NV21到I420的转换并旋转。
5. RTMP推送：
   • 设置推送URL：通过SmartPublisherSetURL接口设置RTMP推送的URL。
   • 推送控制：提供startPush、stopPush等接口控制推送的开始和停止。
6. 扩展功能：
   • 本地录像与快照：支持本地录像和快照功能，通过相关接口实现。
   • H.265与Enhanced RTMP支持：除了H.264外，还支持H.265编码和Enhanced RTMP扩展。
7. 实现示例：
   • Camera2对接示例：在onCreate方法中初始化SmartPublisherJniV2实例，并设置相关参数和回调。
   • 推送RTMP示例：展示了如何配置推送参数、设置硬编码、启动和停止推送等步骤。

总结

RTMP优势在于它能够提供低延迟的实时音视频传输，同时具有良好的跨平台支持，可以在不同的操作系统和设备上运行。这使得RTMP成为直播、视频会议、在线教育等领域中广泛使用的技术之一。RTMP推流技术以其低延迟、跨平台支持、稳定性和丰富的交互能力等特点，在实时音视频传输领域具有广泛的应用前景。随着技术的不断发展和完善，相信RTMP推流技术将会在未来的音视频传输领域发挥更加重要的作用。

​