音视频android，音视频开发

Android音视频【十二】使用OpenSLES和AudioTrack进行播放PCM

1、AudioTrack 一般用于 比如本地播放一个pcm文件/流，又或者播放解码后的音频的pcm流，API较简单。

2、Android中音频的播放使用的是AudioTrack类，具体用法非常简单。首先设置buffer大小。AudioTrack播放时需要先写入buffer，如果这个buffer没有写满，那么这部分是不会播放的。

3、中间碰到的问题贼多，主要是用AudioRecord采集声音的时候，然后用AudioTrack播放经常会出现噪音，这样的情况让人实在是无法接受。

4、优点： 官方提供 API 缺点： 不能实时处理音频，输出格式不多，且PCM可以处理生成 AudioRecord： 录制的是PCM格式的音频文件，需要用AudioTrack来播放。

5、首先我们把上一篇的最核心部分贴出来：我们首先完成单声道转双声道的操作。

6、MediaMetadataRetriever是Android原生提供的获取音视频文件信息的一个类，我们可以通过这个类的相关方法获取一些基本信息，如视频时长、宽高、帧率、方向、某一帧的图片等。

相关问答

Q1: Android音视频开发——H264的基本概念

H264功能分为两层：H264视频序列包括一系列的NAL单元，每个NAL单元包含一个RBSP。

组成H264码流的结构中 包含以下几部分 ，从大到小排序依次是： H264视频序列，图像，片组，片，NALU，宏块 ，像素。

了解了块结构混合编码后，理解H264的基本原理其实非常简单，下我们就简单的描述一下H264压缩数据的过程。通过摄像头采集到的视频帧（按每秒 30 帧算），被送到 H264 编码器的缓冲区中。编码器先要为每一幅图片划分宏块。

视频帧就行编码。大致的流程分为三步：VTCompressionSessionCreate 创建编码对象参数详解：VTCompressionSessionEncodeFrame 编码函数参数详解：本篇就介绍了音视频的编码原理，及部分解析。更多H264以及H265编码，以及ffmpeg 实现。

Q2: Android系统中的多媒体框架是怎么样的

Android的多媒体框架包括支持播放多种常见的媒体类型，可以轻松地把音频、视频和图像集成到你的应用。可以播放音频或视频媒体文件，这些文件是存储在你的应用程序的资源文件中的。

Android采用OpenCORE作为基础多媒体框架。OpenCORE可分7大块：PVPlayer、PVAuthor、Codec、PacketVideoMultimediaFramework(PVMF)、OperatingSystemLibrary(OSCL)、Common、OpenMAX。Android使用skia为核心图形引擎，搭配OpenGL/ES。

MediaPlayer：MediaPlayer是Android系统中最常用的多媒体播放器。它能够以流的方式处理多种音频和视频格式，如MPWAV等音频格式，以及MPH.264等视频格式。

音视频android的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于音视频开发、音视频android的信息别忘了在本站进行查找喔。