android使用FFmpeg解码MP4中的音频并使用AudioTrack播放

虽然网上有很多类似标题的博客，但是他们的代码运行之后一般都会有杂音或者其他的播放问题，原因也很简单，就是他们的代码太老了，网上现在一般流传的都是FFmpeg2点多的相关代码，而官网都是4点多了，所以一些方法的废弃更替导致了别人说能正常播放，而你的代码却运行异常。

废话不多说了，我使用的的ffmpeg-3.3.9编译的.so库，android-ndk-r14b。如果你也跟我的配置一样那就OK了，如果不一样没准也会有启发，但是不保证管用。

编码思路：

注册所有组件；打开文件；获取文件信息；找到解码器id；获取解码器；打开解码器；创建采样转换对象swrContext；配置swrContext参数，注意输出采样率和输入采样率一致，声道布局也一致，选对PCM采样格式；init swrContext对象，一定要init，否则后续无法转换采样格式；获取AudioTrack对象；运行audioTrack的play方法；循环读取帧内容；转换每一帧的采样格式，输出数据保存在buffer中；利用audioTrack的write方法播放buffer中的有效内容。

下面是.cpp文件的内容，注释很详细：

#include <jni.h>extern "C" {#include <libavcodec/avcodec.h>#include <libavformat/avformat.h>#include <android/log.h>#include <libswresample/swresample.h>#include <unistd.h>#define LOGE(FORMAT, ...) __android_log_print(ANDROID_LOG_ERROR, "audio",FORMAT, __VA_ARGS__);JNIEXPORT void JNICALLJava_nci_pactera_com_useffmpeg_MainActivity_soundPalyer(JNIEnv *env, jobject instance,jstring srcPath_) {const char *srcPath = env->GetStringUTFChars(srcPath_, 0);//1.注册所有组件av_register_all();AVFormatContext *avFormatContext = avformat_alloc_context();//2.打开文件if (avformat_open_input(&avFormatContext, srcPath, NULL, NULL) != 0) {LOGE("%s", "打开文件失败");}//3.获取文件信息if (avformat_find_stream_info(avFormatContext, NULL)) {LOGE("%s", "获取文件信息失败");}//4.获取解码器idint codecIndex = -1;for (int i = 0; i < avFormatContext->nb_streams; ++i) {if (avFormatContext->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_AUDIO) {codecIndex = i;break;}}if (codecIndex < 0) {LOGE("%s", "获取解码器id失败");}//5.获取解码器AVCodecParameters *avCodecParameters = avFormatContext->streams[codecIndex]->codecpar;AVCodec *avCodec = avcodec_find_decoder(avCodecParameters->codec_id);AVCodecContext *avCodecContext = avcodec_alloc_context3(avCodec);avcodec_parameters_to_context(avCodecContext, avCodecParameters);//6.打开解码器if (avcodec_open2(avCodecContext, avCodec, NULL) < 0) {LOGE("%s", "打开解码器失败");}AVFrame *srcFrame = av_frame_alloc();AVPacket *avPacket = av_packet_alloc();SwrContext *swrContext = swr_alloc();//设置swrContext的属性swr_alloc_set_opts(swrContext,avCodecContext->channel_layout, //输出音道布局 例如：单声道、双声道、5-1立体声等//输出采样格式 这里的值代表PCM格式 网上使用的AV_SAMPLE_FMT_S16这种是格式他们的区别在于是否是平面的，但是我现在还理解不了//只能说结果就是用AV_SAMPLE_FMT_S16P播放出来的声音正常，AV_SAMPLE_FMT_S16播放出来的声音会拉长声调也不对AV_SAMPLE_FMT_S16P,avCodecContext->sample_rate,//输出采样率 和输入一致就行，不要自己随便写个44100或者16000avCodecContext->channel_layout,//输入音道布局avCodecContext->sample_fmt, //输入采样格式avCodecContext->sample_rate, //输入采样率0, NULL);//一定要记得配置好属性后init，否则转换方法不好使swr_init(swrContext);//JNI调用java方法--------startjclass audio_main_class = (*env).GetObjectClass(instance);//获取java类对象//方法签名的获取的方法 cmd到D:\Useffmpeg\app\build\intermediates\classes\debug下//执行javap -s 包名.类名然后找到对应方法名descriptor:后面的就是方法签名//获取创建audioTrack的方法idjmethodID get_audio_mid = (*env).GetMethodID(audio_main_class, //类对象"getAudioTrack",//方法名"(II)Landroid/media/AudioTrack;");//方法签名//根据声道布局获取声道个数int channels = av_get_channel_layout_nb_channels(avCodecContext->channel_layout);//根据方法id调用创建方法获取audioTrack对象jobject audio_track = (*env).CallObjectMethod(instance, get_audio_mid,avCodecContext->sample_rate, channels);if (NULL == audio_track) {LOGE("%s", "获取audioTrack对象失败");}//获取AudioTrack类对象jclass audio_track_class = (*env).GetObjectClass(audio_track);//获取AudioTrack的play方法idjmethodID audio_track_play_mid = (*env).GetMethodID(audio_track_class, "play", "()V");//调用play方法(*env).CallVoidMethod(audio_track, audio_track_play_mid);//获取write方法idjmethodID audio_track_write_mid = (*env).GetMethodID(audio_track_class, "write", "([BII)I");//JNI调用java方法--------end//开辟输出缓存空间int out_size = channels * avCodecContext->sample_rate;uint8_t *out = static_cast<uint8_t *>(av_malloc(out_size));//7.一帧一帧循环解码int frameCount = 0;while (av_read_frame(avFormatContext, avPacket) >= 0) {//这里注意，只获取文件中的音频类型数据，如果不判断会导致数据类型错误而出现异常if (avPacket->stream_index == codecIndex)//avcodec_send_packet和avcodec_receive_frame配合使用替代avcodec_decode_audio4读取一帧内容if (avcodec_send_packet(avCodecContext, avPacket) >= 0) {if (avcodec_receive_frame(avCodecContext, srcFrame) >= 0) {//采样格式转换，返回值是每个输出声道的采样数int len = swr_convert(swrContext, &out, out_size,(const uint8_t **) (srcFrame->data),srcFrame->nb_samples);if (len >= 0) {//格式转换后所有声道的有效采样数，// 注意不要用srcFrame->linesize[0]因为这个值可能会超出有效采样范围，// 从而多复制很多的错误数据，导致播放噪音int bufferSize = len * channels;//write方法的参数为byteArray所以创建一个jbyteArray audio_data = (*env).NewByteArray(bufferSize);//将PCM数据复制到byteArray中(*env).SetByteArrayRegion(audio_data, 0, bufferSize,(const jbyte *) (out));//调用write方法(*env).CallIntMethod(audio_track, audio_track_write_mid, audio_data, 0,bufferSize);//这里注意是否局部变量，否则会溢出(*env).DeleteLocalRef(audio_data);LOGE("解码第%d帧", ++frameCount);usleep(16 * 1000);}}}av_packet_unref(avPacket);}av_frame_free(&srcFrame);av_free(out);swr_free(&swrContext);avcodec_close(avCodecContext);avformat_close_input(&avFormatContext);env->ReleaseStringUTFChars(srcPath_, srcPath);}}

源代码也上传了CSDN下面有链接可以自己去下载运行试试下载链接，里面还包括了从MP4解码YUV然后播放的代码。有问题欢迎留言一起学习。