在直播类app开发之前，要先了解音视频开发有关的基础知识，这样不管是选择成品源码还是自行开发，都可以避免很多问题的出现，方便推进后续开发。 一、音视频处理 二、编码 三、推流 推流就是直播类app将通过采集、编码、等操作的音视频数据，推送到服务器上的过程，直播类app想要实现推流，还需要流媒体文件的支持。直播类app开发常用的流媒体文件有RTMP协议、RTSP协议、HLS协议等，不同的协议具有不同的作用，存在的延迟也不相同，直播类app开发要注意流媒体格式的选择。
1、视频处理
直播类app开发的直播功能，对主播最重要的功能之一，就是美颜功能的实现。美颜功能属于视频处理的范畴，虽然美颜功能看起来不难，但是它涉及的技术很复杂，人脸识别、图像处理、人脸追踪等功能。除了美颜的实现以外，还有用户在直播视频连麦时的视频合成等技术，也属于视频处理技术。
2、音频处理
直播类app开发使用音频处理技术，主要是对音频进行降噪处理，同时消除回声，如果用户有需求的话，还能通过音频处理技术添加声音特效，增加趣味性。
直播类app开发可以使用的编码方式有两种，使用系统API等硬件进行编码的硬编码，和使用系统CPU等软件编码的软编码。软编码会对设备的性能要求比较高，而硬编码的兼容性又不太好，所以在直播类app开发时要选择制定合适的编码策略。
在视频编码的概念中，需要知道三个概念，文件格式、视频格式和编码格式。文件格式就是一个盒子，盛放的是经过压缩的音视频数据，封装格式就是在将音视频数据封装在一起的格式，编码格式就是音视频使用的编码，经过编码可以将原始音视频文件进行压缩，转换成其他类型的文件。