一、音頻播放流程

1、打開音頻文件

通過? avformat_open_input()?打開媒體文件并分配和初始化? AVFormatContext??結(jié)構(gòu)體。

函數(shù)原型如下：
int avformat_open_input(AVFormatContext **ps, const char *url, AVInputFormat *fmt, AVDictionary **options);

參數(shù)說明：
- `ps`：指向 `AVFormatContext` 結(jié)構(gòu)體指針的指針，用于存儲(chǔ)打開的媒體文件的信息。
- `url`：要打開的媒體文件的 URL 或文件路徑。
- `fmt`：指定輸入格式，通?？梢栽O(shè)置為 `NULL`，由 FFmpeg 根據(jù)文件內(nèi)容自動(dòng)檢測(cè)。
- `options`：附加選項(xiàng)，可以傳入一些額外的選項(xiàng)參數(shù)。

2、查找輸入流信息

調(diào)用 ?avformat_find_stream_info() ?函數(shù)將會(huì)讀取媒體文件中的幀，解析它們的頭部，
并填充 AVFormatContext 中的流信息,通過訪問 AVFormatContext 的 streams 字段來獲取每個(gè)流的詳細(xì)信息。

函數(shù)原型如下：
int avformat_find_stream_info(AVFormatContext *ic, AVDictionary **options);

參數(shù)說明：
- `ic`：指向已打開媒體文件的 `AVFormatContext` 結(jié)構(gòu)體的指針。
- `options`：指向包含附加選項(xiàng)的 `AVDictionary` 指針。

3、查找流索引

使用 av_find_best_stream() 從媒體文件中找到最佳的流索引

函數(shù)原型如下：
int av_find_best_stream(AVFormatContext *ic, enum AVMediaType type, int wanted_stream, int related_stream, AVCodec **decoder_ret, int flags);

參數(shù)說明：
- `ic`：指向已打開媒體文件的 `AVFormatContext` 結(jié)構(gòu)體的指針。
- `type`：要查找的流類型，可以是 `AVMEDIA_TYPE_VIDEO`、`AVMEDIA_TYPE_AUDIO` 等。
- `wanted_stream`：期望的流索引，如果為負(fù)值，則表示沒有特定的偏好。
- `related_stream`：相關(guān)流索引，用于查找與之相關(guān)的最佳流。
- `decoder_ret`：用于返回找到的解碼器。
- `flags`：附加標(biāo)志，可以用來指定額外的查找選項(xiàng)。

4、查找解碼器

使用 avcodec_find_decoder() 查找符合指定解碼器名稱的解碼器。

函數(shù)原型如下：
AVCodec *avcodec_find_decoder(enum AVCodecID id);

參數(shù)說明：
- `id`：要查找的解碼器的 ID。

5、初始化解碼上下文

調(diào)用? avcodec_alloc_context3()??函數(shù)會(huì)為特定的編解碼器分配一個(gè)? AVCodecContext??結(jié)構(gòu)體，并對(duì)其進(jìn)行初始化。 AVCodecContext??結(jié)構(gòu)體包含了編解碼器的相關(guān)參數(shù)和狀態(tài)信息，比如編解碼器類型、解碼參數(shù)、幀率等。

函數(shù)原型如下：
AVCodecContext *avcodec_alloc_context3(const AVCodec *codec);
參數(shù)說明：
- `codec`：指定要使用的編解碼器，可以通過 `avcodec_find_decoder()` 或其他方式獲取。

6、獲取解碼參數(shù)

調(diào)用 `avcodec_parameters_to_context()` 函數(shù)可以方便地將 `AVCodecParameters` 結(jié)構(gòu)體中的參數(shù)（如編解碼器類型、幀率、分辨率等）復(fù)制到 `AVCodecContext` 結(jié)構(gòu)體中，從而準(zhǔn)備進(jìn)行編解碼操作。

函數(shù)原型如下：
int avcodec_parameters_to_context(AVCodecContext *codec, const AVCodecParameters *par);

參數(shù)說明：
- `codec`：要填充參數(shù)的 `AVCodecContext` 結(jié)構(gòu)體指針。
- `par`：包含編解碼器參數(shù)的 `AVCodecParameters` 結(jié)構(gòu)體指針。

7、打開解碼器

調(diào)用 `avcodec_open2()` 函數(shù)可以打開并初始化指定的編解碼器上下文，使其準(zhǔn)備好進(jìn)行編解碼操作。

函數(shù)原型如下：
int avcodec_open2(AVCodecContext *avctx, const AVCodec *codec, AVDictionary **options);
參數(shù)說明：
- `avctx`：要打開和初始化的編解碼器上下文。
- `codec`：要使用的編解碼器，可以通過 `avcodec_find_decoder()` 或其他方式獲取。
- `options`：可選的字典參數(shù)，用于設(shè)置編解碼器的選項(xiàng)。

打開解碼器時(shí)可以使用多線程參數(shù)優(yōu)化解碼速度。

AVDictionary* opts = NULL;
//使用多線程解碼
if (!av_dict_get(opts, "threads", NULL, 0))
?? ?av_dict_set(&opts, "threads", "auto", 0);

8、創(chuàng)建音頻重采樣上下文

調(diào)用 `swr_alloc_set_opts()` 函數(shù)可以創(chuàng)建一個(gè)音頻重采樣上下文，并設(shè)置其參數(shù)。這個(gè)函數(shù)可以方便地指定輸入和輸出音頻的通道布局、采樣格式和采樣率等參數(shù)。
?

函數(shù)原型如下：
struct SwrContext *swr_alloc_set_opts(struct SwrContext *s,
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? int64_t out_ch_layout, enum AVSampleFormat out_sample_fmt, int out_sample_rate,
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? int64_t in_ch_layout, enum AVSampleFormat in_sample_fmt, int in_sample_rate,
? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? int log_offset, void *log_ctx);
參數(shù)說明：
- `s`：要?jiǎng)?chuàng)建或設(shè)置參數(shù)的音頻重采樣上下文。如果傳入非空指針，則會(huì)設(shè)置現(xiàn)有上下文的參數(shù)；如果傳入空指針，則會(huì)創(chuàng)建一個(gè)新的上下文。
- `out_ch_layout`：輸出音頻的通道布局（channel layout）。
- `out_sample_fmt`：輸出音頻的采樣格式（sample format）。
- `out_sample_rate`：輸出音頻的采樣率（sample rate）。
- `in_ch_layout`：輸入音頻的通道布局。
- `in_sample_fmt`：輸入音頻的采樣格式。
- `in_sample_rate`：輸入音頻的采樣率。
- `log_offset`：日志輸出偏移量。
- `log_ctx`：日志上下文。

9、初始化音頻重采樣上下文

調(diào)用 `swr_init()` 函數(shù)可以初始化音頻重采樣上下文，使其準(zhǔn)備好進(jìn)行音頻重采樣操作。

函數(shù)原型如下：
int swr_init(struct SwrContext *s);
參數(shù)說明：
- `s`: 要初始化的音頻重采樣上下文。

10、分配并初始化一個(gè)臨時(shí)的幀和包

調(diào)用 `av_packet_alloc()` 函數(shù)可以分配一個(gè) AVPacket 結(jié)構(gòu)體，并返回指向該結(jié)構(gòu)體的指針。AVPacket 結(jié)構(gòu)體用于存儲(chǔ)音視頻數(shù)據(jù)，包括數(shù)據(jù)緩沖區(qū)、大小、時(shí)間戳等信息。

調(diào)用 `av_frame_alloc()` 函數(shù)可以分配一個(gè) AVFrame 結(jié)構(gòu)體，并返回指向該結(jié)構(gòu)體的指針。AVFrame 結(jié)構(gòu)體用于存儲(chǔ)音視頻幀的數(shù)據(jù)，包括像素?cái)?shù)據(jù)、采樣數(shù)據(jù)、時(shí)間戳等信息。
?

函數(shù)原型如下：

AVPacket *av_packet_alloc(void);
AVFrame *av_frame_alloc(void);

11、讀取音視頻源文件

調(diào)用 `av_read_frame()` 函數(shù)可以從輸入文件或流中讀取一幀音視頻數(shù)據(jù)，并將其存儲(chǔ)在 AVPacket 結(jié)構(gòu)體中。

函數(shù)原型如下：
int av_read_frame(AVFormatContext *s, AVPacket *pkt);
參數(shù)說明：
- `s`：輸入文件或流的 AVFormatContext 上下文。
- `pkt`：存儲(chǔ)讀取到的音視頻幀數(shù)據(jù)的 AVPacket 結(jié)構(gòu)體。

12、發(fā)送音頻數(shù)據(jù)到解碼器

調(diào)用 `avcodec_send_packet()` 函數(shù)可以將 AVPacket 數(shù)據(jù)包發(fā)送給解碼器進(jìn)行解碼。在發(fā)送完所有數(shù)據(jù)包后，需要調(diào)用 `avcodec_send_packet()` 傳遞一個(gè)空的 AVPacket 指針，以便告知解碼器已經(jīng)發(fā)送完所有數(shù)據(jù)。

函數(shù)原型如下：
int avcodec_send_packet(AVCodecContext *avctx, const AVPacket *avpkt);
參數(shù)說明：
- `avctx`：指向 AVCodecContext 結(jié)構(gòu)體的指針，表示解碼器上下文。
- `avpkt`：指向要發(fā)送給解碼器的 AVPacket 數(shù)據(jù)包的指針。

13、從解碼器接收解碼后的音頻數(shù)據(jù)

調(diào)用 `avcodec_receive_frame()` 函數(shù)可以從解碼器中接收解碼后的音視頻幀數(shù)據(jù)，并將其存儲(chǔ)在 AVFrame 結(jié)構(gòu)體中。

函數(shù)原型如下：
int avcodec_receive_frame(AVCodecContext *avctx, AVFrame *frame);
參數(shù)說明：
- `avctx`：指向 AVCodecContext 結(jié)構(gòu)體的指針，表示解碼器上下文。
- `frame`：用于存儲(chǔ)接收到的解碼后的 AVFrame 幀數(shù)據(jù)的結(jié)構(gòu)體。
?

14、進(jìn)行音頻重采樣

調(diào)用 `swr_convert()` 函數(shù)可以將輸入緩沖區(qū)中的音頻數(shù)據(jù)進(jìn)行重采樣，并將結(jié)果存儲(chǔ)到輸出緩沖區(qū)中。

函數(shù)原型如下：
int swr_convert(struct SwrContext *s, uint8_t **out, int out_count, const uint8_t **in, int in_count);
參數(shù)說明：
- `s`：指向 SwrContext 結(jié)構(gòu)體的指針，表示音頻重采樣上下文。
- `out`：指向輸出音頻數(shù)據(jù)緩沖區(qū)的指針數(shù)組。
- `out_count`：輸出緩沖區(qū)中的樣本數(shù)。
- `in`：指向輸入音頻數(shù)據(jù)緩沖區(qū)的指針數(shù)組。
- `in_count`：輸入緩沖區(qū)中的樣本數(shù)。

15、播放音頻

將重采樣后的數(shù)據(jù)寫入聲卡中進(jìn)行播放。

簡(jiǎn)潔流程如下：

其他重要API：
void av_dump_format(const AVFormatContext *ic, int index,
? ? ? ? ? ? ? ? ? ? const char *url, int is_output);

?//可以將輸入/輸出文件的格式信息以人類可讀的形式打印出來，包括流的詳細(xì)信息、編解碼器信息等。這對(duì)于調(diào)試和了解輸入/輸出文件的結(jié)構(gòu)和信息非常有幫助。
參數(shù)說明：
- `ic`：指向 AVFormatContext 結(jié)構(gòu)體的指針，表示要進(jìn)行格式信息輸出的輸入/輸出文件的 AVFormatContext。
- `index`：如果為非負(fù)值，表示要輸出的流的索引；如果為負(fù)值，表示輸出所有流信息。
- `url`：文件的 URL 或名稱，在打印信息時(shí)會(huì)用到。
- `is_output`：如果為非零值，表示輸出的是輸出文件的格式信息；如果為 0，表示輸出的是輸入文件的格式信息。

int av_samples_get_buffer_size(int *linesize, int nb_channels, int nb_samples, enum AVSampleFormat sample_fmt, int align);

//計(jì)算出存儲(chǔ)指定數(shù)量音頻樣本所需的緩沖區(qū)大小。這個(gè)函數(shù)通常用于動(dòng)態(tài)分配音頻樣本數(shù)據(jù)緩沖區(qū)的場(chǎng)景。
參數(shù)說明：
- `linesize`：指向存儲(chǔ)每個(gè)通道數(shù)據(jù)大小的數(shù)組的指針。
- `nb_channels`：音頻通道數(shù)。
- `nb_samples`：每個(gè)通道中的音頻樣本數(shù)。
- `sample_fmt`：音頻樣本格式，使用 AVSampleFormat 枚舉類型。
- `align`：對(duì)齊方式，通常為 0。

AVFormatContext *avformat_alloc_context(void);

//用于分配內(nèi)存并返回一個(gè)初始化后的 AVFormatContext 結(jié)構(gòu)體指針。

AVFormatContext 結(jié)構(gòu)體里面有一個(gè)重要的參數(shù)?interrupt_callback.callback ，用來設(shè)置回調(diào)函數(shù)。當(dāng)調(diào)用av_read_frame或avformat_find_stream_info會(huì)阻塞執(zhí)行很長時(shí)間的時(shí)候，只要設(shè)置該回調(diào)函數(shù)返回 1 ，那么就會(huì)不再阻塞，立即返回。

二、代碼例程

音頻播放：點(diǎn)擊跳轉(zhuǎn)

視頻播放：點(diǎn)擊跳轉(zhuǎn)

覺得有幫助的話，打賞一下唄。。

? ? ? ? ? ?文章來源地址http://www.zghlxwxcb.cn/news/detail-855313.html

到了這里，關(guān)于qt+ffmpeg 實(shí)現(xiàn)音視頻播放（二）之音頻播放的文章就介紹完了。如果您還想了解更多內(nèi)容，請(qǐng)?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章，希望大家以后多多支持TOY模板網(wǎng)！