音视频项目—基于FFmpeg和SDL的音视频播放器解析(十五)

news/2024/7/10 20:41:02 标签: 音视频, ffmpeg

介绍

在本系列,我打算花大篇幅讲解我的 gitee 项目音视频播放器,在这个项目,您可以学到音视频解封装,解码,SDL渲染相关的知识。您对源代码感兴趣的话,请查看基于FFmpeg和SDL的音视频播放器

如果您不理解本文,可参考我的前一篇文章音视频项目—基于FFmpeg和SDL的音视频播放器解析(十四)

解析

我们这篇文章接着解析 audiooutput 剩余的函数。

有一个很关键的函数,fill_audio_pcm

FILE* dump_pcm = nullptr;
void fill_audio_pcm(void* udata, uint8_t* stream, int len){
    AudioOutput* is = (AudioOutput*)udata;
    int len1 = 0;
    int audio_size = 0;
    if(!dump_pcm){
        dump_pcm = fopen("dump.pcm", "wb");
    }
    while (len > 0)
    {
        if(is->audio_buf_index == is->audio_buf_size){
            is->audio_buf_index = 0;
            AVFrame* frame = is->frame_queue->Pop(10);
            if(frame){
                is->pts = frame->pts;
                if(frame->format != is->dst_tgt.fmt
                   || frame->sample_rate != is->dst_tgt.freq
                   || frame->channel_layout != is->dst_tgt.channel_layout
                   && !is->swr_ctx){

                    is->swr_ctx = swr_alloc_set_opts(NULL, 
                                                    is->dst_tgt.channel_layout,
                                                    (enum AVSampleFormat)is->dst_tgt.fmt,
                                                    is->dst_tgt.freq,
                                                    frame->channel_layout,
                                                    (enum AVSampleFormat)frame->format,
                                                    frame->sample_rate,
                                                    0, NULL);
                    if(!is->swr_ctx || swr_init(is->swr_ctx) < 0){
                        swr_free((SwrContext**)(&is->swr_ctx));
                        return;
                    }
                }
                if(is->swr_ctx){
                    const uint8_t** in = (const uint8_t**) frame->extended_data;
                    uint8_t** out = &is->audio_buf1;
                    int out_samples = frame->nb_samples * is->dst_tgt.freq / frame->sample_rate + 256;
                    int out_bytes = av_samples_get_buffer_size(NULL, is->dst_tgt.channels, out_samples, is->dst_tgt.fmt, 0);
                    if(out_bytes < 0){
                        return;
                    }
                    av_fast_malloc(&is->audio_buf1, &is->audio_buf1_size, out_bytes);
                    int len2 = swr_convert(is->swr_ctx, out, out_samples, in, frame->nb_samples);
                    if(len2 < 0){
                        return;
                    }
                    is->audio_buf = is->audio_buf1;
                    is->audio_buf_size = av_samples_get_buffer_size(NULL, is->dst_tgt.channels, len2, is->dst_tgt.fmt, 1);
                }else {
                    audio_size = av_samples_get_buffer_size(NULL, is->dst_tgt.channels, frame->nb_samples, (enum AVSampleFormat) frame->format, 1);
                    av_fast_malloc(&is->audio_buf1, &is->audio_buf1_size, audio_size);
                    is->audio_buf = is->audio_buf1;
                    is->audio_buf_size = audio_size;
                    memcpy(is->audio_buf, frame->data[0], audio_size);
                }
                av_frame_free(&frame);
            }else {
                is->audio_buf = nullptr;
                is->audio_buf_size = 512;
            }
        }
        len1 = is->audio_buf_size - is->audio_buf_index;
        if(len1 > len){
            len1 = len;
        }
        if(!is->audio_buf){
            memset(stream, 0, len1);
        }else {
            memcpy(stream, is->audio_buf + is->audio_buf_index, len1);
            fwrite((uint8_t*)is->audio_buf + is->audio_buf_index, 1, len1, dump_pcm);
            fflush(dump_pcm);
        }
        len -= len1;
        stream += len1;
        is->audio_buf_index += len1;
    }
    if(is->pts != AV_NOPTS_VALUE){
        double pts = is->pts * av_q2d(is->time_base);
        is->avsync->SetClock(pts);
    }
}

这个函数有将近 80 行代码,负责将 pcm 数据填入音频。这个函数是用在 Init 函数上的,用于给 SDL_AudioSpec 的变量的 callback 赋值。

wanted_spec.callback = fill_audio_pcm;

接下来,我们逐条解析这个函数。

首先看前五行代码

    AudioOutput* is = (AudioOutput*)udata;
    int len1 = 0;
    int audio_size = 0;
    if(!dump_pcm){
        dump_pcm = fopen("dump.pcm", "wb");
    }

就是一些正常的赋值操作,如果文件不存在,则打开一个名为 “dump.pcm” 的文件,设为二进制可写。

while (len > 0)
    {
        if(is->audio_buf_index == is->audio_buf_size){
            is->audio_buf_index = 0;
            AVFrame* frame = is->frame_queue->Pop(10);

在长度 len 大于 0 的情况下,如果两个变量相等,则将 index 设置为 0,取出帧队列的头部数据,10 是 Pop 里的参数,关于条件变量的,这里不深究。

if(frame){
   is->pts = frame->pts;
   if(frame->format != is->dst_tgt.fmt
          || frame->sample_rate != is->dst_tgt.freq
          || frame->channel_layout != is->dst_tgt.channel_layout
          && !is->swr_ctx){

然后,在帧数据存在的情况下,将 pts(显示时间戳)赋值,然后开始条件判断,满足这些条件后执行。

好了,这篇文章先讲 20 行代码,剩余的后几篇文章再讲。

欲知后事如何,请听下回分解。


http://www.niftyadmin.cn/n/5198995.html

相关文章

hadoop、hive、DBeaver的环境搭建及使用

本文主要介绍hadoop、hive的结构及使用&#xff0c;具体的操作步骤见最后的附件&#xff1b; hadoop提供大数据的存储、资源调度、计算&#xff0c;分为三个模块&#xff1a;HDFS、YRAN、MapReduce HDFS提供数据的分布式存储&#xff0c;分为三个节点NameNode,DataNode,Second…

R语言——taxize(第三部分)

taxize&#xff08;第三部分&#xff09; 3. taxize 文档中译3.24. genbank2uid&#xff08;从 GenBankID 获取 NCBI 分类 UID&#xff09;3.25. getkey&#xff08;获取 API 密钥的函数&#xff09;3.26. get_boldid&#xff08;获取搜索词的 BOLD&#xff08;生命条形码&…

【Spring Boot】使用WebSocket协议完成来单提醒及客户催单功能

1 WebSocket介绍 WebSocket 是基于 TCP 的一种新的网络协议。它实现了浏览器与服务器全双工通信(双向传输)——浏览器和服务器只需要完成一次握手&#xff0c;两者之间就可以创建持久性的连接&#xff0c; 并进行双向数据传输。 1.1 HTTP协议和WebSocket协议对比 1、HTTP是短…

JavaScript 字符处理

1.删除前几个字符 使用 slice console.log(12345.slice(1))// 23452.首字母大写 var word abcconsole.log(word.charAt(0).toUpperCase() word.slice(1))// Abc3.字符为数字时可直接相乘 console.log(2*3) 4.字符串中是否包含某个子字符串 子串既可以为数字也可为字符串 /…

python+selenium实现web自动化(基础入门)

selenium 是一个自动化操控工具&#xff0c;支持对web端进行自动化操控&#xff0c;从而实现自动化测试。 相关文档&#xff1a; https://python-selenium-zh.readthedocs.io/zh-cn/latest/https://www.selenium.dev/documentation/ 安装配置 环境依赖&#xff1a; python…

Java学习day14:权限修饰符,集合(知识点+例题详解)

声明&#xff1a;该专栏本人重新过一遍java知识点时候的笔记汇总&#xff0c;主要是每天的知识点题解&#xff0c;算是让自己巩固复习&#xff0c;也希望能给初学的朋友们一点帮助&#xff0c;大佬们不喜勿喷(抱拳了老铁&#xff01;) 往期回顾 Java学习day13&#xff1a;泛型&…

Android Binder 是怎么实现进程间通信

文章目录 Android Binder 是怎么实现进程间通信 Android Binder 是怎么实现进程间通信 Android Binder 机制的实现基于 Linux 内核中的 Inter-Process Communication&#xff08;IPC&#xff09;机制&#xff0c;具体来说&#xff0c;它是通过进程间共享内存和进程间调用&…

数据仓库高级面试题

数仓高内聚低耦合是怎么做的 定义 高内聚&#xff1a;强调模块内部的相对独立性&#xff0c;要求模块内部的元素尽可能的完成一个功能&#xff0c;不混杂其他功能&#xff0c;从而使模块保持简洁&#xff0c;易于理解和管理。 低耦合&#xff1a;模块之间的耦合度要尽可能的…