文档章节

借用PortAudio采集和播放音频,实现一个双路混音器(转)

元谷
 元谷
发布于 2013/12/09 17:24
字数 1199
阅读 320
收藏 1

转自:http://www.cnblogs.com/haibindev/archive/2011/12/07/2277366.html  混音,顾名思义,就是把多个音源混合的过程,是一个很常见的应用。这两天我也做了一个双路混音器,当然,我没有做多么专业的音频信号处理,只是一个简单的混音,调节各路音量,并实现了一些音效处理。主要功能有:采集硬件设备,读取wav文件,播放,混音,音量调节,音频节奏、音调的调节,wav文件输出。这么多功能,我们不需要一个一个全部自己实现,有时候,借助开源项目,尤其是比较成熟的开源项目,不但可以大大节省开发时间,还能使程序更加稳定。即便不能直接在自己的项目中使用,也能有借鉴意义。这个项目中我就使用了PortAudio,PortAudio是一个开源的、跨平台的音频IO库,它主要提供了音频采集和播放的接口,而且API非常简单。大家可以尝试一下。

  下图就是该项目产品截图:

  所有的功能呢,在界面上是一目了然了,其中有三个子窗口,是音频数据经FFT(快速傅立叶)变换后显示的频谱图,左右两个分别是两路音频的,中间则是混音后的。这里我和大家分享一下这个混音器的设计思路以及PortAudio的使用,希望有需求的朋友能够有所借鉴。

首先是程序的逻辑架构图

  PortAudio在项目中主要负责采集硬件设备和播放内存中的音频Sample,其实在Windows上实现这种功能可以有多种方法,之前我也基于DirectShow做过,这次使用PortAudio主要也是想熟悉一下,将来如果要做其他平台的应用时,可以直接拿来使用了。

AudioInput的主要功能是封装一下音频的输入,包括硬件采集和文件读取 AudioMixer管理AudioInput,并进行音量和各种音效处理 鉴于文件操作比较费时,FileWritter的操作其实是放在单独的线程中进行的。

PortAudio的封装和使用

  PortAudio的API非常的简单,基本上完成采集或播放的功能,只需要调用三个接口就可以了:Pa_OpenStream, Pa_StartStream, Pa_CloseStream。它们的原型如下

  首先,我们需要调用Pa_Initialize来进行PortAudio的初始化,然后设置好Pa_OpenStream的各项参数,然后就可以使用它了。调用Pa_StartStream之后,如果是采集,就可以从PortAudio读取数据了,如果是播放,则只需要不断的把要播放的音频数据交给PortAudio就行了。而PortAudio和你的程序之间的数据的交互,其实是有两种方式的,一种就是上面原型中提到的设置回调函数的形式,另一种就是调用Pa_ReadStream和Pa_WriteStream这两个函数,我推荐还是通过回调的形式,简单嘛,这个最重要了:)。回调函数的原型也比较简单,采集和播放都是一样的。

  我们只需要在回调函数中操作inputBuffer或者outputBuffer即可,下面是我启动前进行设置的代码:

  1. PortAudio的采集

  2. PortAudio的播放

  有一点需要注意的是,framesPerBuffer的值,也就是在Pa_OpenStream中设置的参数值,这个数值就是outputBuffer或inputBuffer中音频帧的个数,我这里设置成了512,当然你也可以设置成其他的数值,不过不宜过小,否则会造成大量的异步回调,cpu是处理不过来的。这个数值再乘以你之前这只的音频帧Sample格式(我这里是paFloat32)和音轨个数,就可以计算出outputBuffer或inputBuffer的大小,然后就可以操作音频数据了,例如在采集的回调函数中这样使用。

memcpy(audio_data, inputBuffer, framesPerBuffer * sizeof(float)*2);

混音算法

  实话实说,这个混音算法是我从网上找到的,不过效果还是挺不错的,公式就是

C = A + B - (A * B >> 0x10)   A和B就是两路不同的音频数据,C就是混音后的音频数据,当然,处理后,还需要对C进行防止数据溢出的处理,否则,可能会有爆音。

如果是16bit音频数据,就是:

if (C > 32767) C = 32767; else if (C < -32768) C = -32768; 如果是float音频数据,就是:

if (C > 1) C = 1; else if (C < -1) C = -1;   这个算法针对的是16bit的音频采样数据,我实验的结果是:对float音频采样数据,同样有不错的效果。

+++++++++++++++++++++++++++++++++++++++++++++++++++++

本文转载自:

元谷

元谷

粉丝 22
博文 117
码字总数 34286
作品 1
深圳
高级程序员
私信 提问
PortAudio编程入门 V19

PortAudio是什么? PortAudio是一个免费、跨平台、开源的音频I/O库。看到I/O可能就想到了文件,但是PortAudio操作的I/O不是文件,而是音频设备。它能够简化C/C++的音频程序的设计实现,能够运...

开源中国驻成都办事处
2012/09/06
0
4
基于ASIO驱动的多通道音频播放控制

@欧阳左至 你好,想跟你请教个问题: 看到您写的关于PortAudio入门编程博客,想必您对这方面比较了解。 我的情况是这样:目前我们有一块基于ASIO驱动的多通道声卡,想利用这个硬件设备来播放...

lsgTHU
2012/09/13
1K
3
PyAudio —— PortAudio 的 Python 语言封装

PyAudio 提供了 PortAudio 的 Python 语言版本,这是一个跨平台的音频 I/O 库,使用 PyAudio 你可以在 Python 程序中播放和录制音频。

oschina
2014/02/07
5
0
MinGW+MSYS编译后的文件怎么在golang中使用?

我已经编译portaudio,目录如下: Msys/1.0/local/bin/libportaudio-2.dll Msys/1.0/local/include/portaudio.h Msys/1.0/local/lib/libportaudio.dll.a Msys/1.0/local/lib/libportaudio.la ......

kingoair
2014/11/17
304
0
portaudio 找不到portaudio.dll

@欧阳左至 你好,想跟你请教个问题: 运行portaudio时 系统找不到portaudio\build\msvc\Win32\Debug\portaudio.dll 怎么办?能加QQ786697890指导么?...

iyouhe
2013/06/05
234
0

没有更多内容

加载失败,请刷新页面

加载更多

所以说这才是Redis进化史吗?看Redis是如何变成最强缓存的

写在前面:笔者翻阅了很多资料,只能找到Redis2.2及以后的主要版本的发布日志。所以,让我们从2.2开始一步一步深入了解Redis。 2.2 redis-cli命令非常大的改进: Tab补全,支持help(例如help ...

Java干货分享
38分钟前
1
0
manjaro抽风,/usr/lib/modules目录丢失

现象 2019年6月16日这周,突然发现manjaro抽风: 先是启动时无法加载一些内核模块,导致启动失败 然后用启动盘重新pacman -S linux,第一次启动是好的,再启动就有问题了 原因 翻来覆去搞不定...

chuqq
44分钟前
5
0
MyClouds-2.0-RC 发布,企业级微服务平台

MyClouds企业级微服务平台 MyClouds-V2.0-RC 已发布。 更新如下 [优化] 重构了系统架构。(移除myclouds-admin-webserver工程,停用后端thymeleaf模版引擎,前后端彻底分离;移除了myclouds-...

xiongchun
45分钟前
0
0
Wine-Staging 4.9 发布,增添一些新补丁

Wine-Staging的工作还在继续,到4.9版为止,在上游Wine代码库上有超过830个补丁。 在上周五的Wine 4.9发布之后,Wine-Staging 4.9已经发布了,之前的一些暂存工作现在围绕Windows编解码器和D...

linuxCool
50分钟前
1
0
JAVA8新特性(吐血整理)

一、Java 8 Lambda 表达式 Lambda 表达式,也可称为闭包,它是推动 Java 8 发布的最重要新特性。 Lambda 允许把函数作为一个方法的参数(函数作为参数传递进方法中)。 使用Lambda 表达式可以...

天王盖地虎626
今天
2
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部