SDL录制音频并播放

摘要:在ubuntu 20.04中使用QAudioInput、PortAduio、ffmpeg打开音频设备录制音频都显示失败,最后没办法选择了SDL2.0,SDL2.0录制音频十分方便,使用也非常简单。

疑问:不知道SDL是如何区分打开的设备是录制还是播放。(已解决,通过打开设备时设置iscapture参数的值,0表示录制,非0表示播放)

主要函数简介:

cpp 复制代码
SDL_Init(SDL_INIT_AUDIO)

此函数用于初始化音频。

cpp 复制代码
SDL_AudioSpec want, have;
SDL_zero(want);
want.freq = 44100;
want.format = AUDIO_S16SYS;
want.channels = 2;
want.samples = 288;
want.callback = audioCallback;

设置音频数据的格式。

cpp 复制代码
//参数iscapture 0表示播放音频  非0表示录制音频
SDL_AudioDeviceID deviceId = SDL_OpenAudioDevice(nullptr, 2, &want, &have, SDL_AUDIO_ALLOW_FORMAT_CHANGE);

此函数用于打开音频设备,音频的录制和播放取决于第二个参数,若第二个参数设置为0,此函数表示的打开录制音频。非0表示打开播放音频。

cpp 复制代码
SDL_QueueAudio(deviceIdO,stream,len);

若不用回调函数,可以使用此函数对音频进行播放操作。

cpp 复制代码
SDL_DequeueAudio(deviceIdO,stream,len);

若不用回调函数,可以使用此函数定时读取录制的音频数据。

cpp 复制代码
SDL_MixAudioFormat(stream, stream, AUDIO_S16SYS, len, 100);

可用于混音和调节音频的音量。

在下面的demo中,音频的录制采用了回调函数,音频的播放采用了SDL_QueueAudio函数。

cpp 复制代码
SDL_AudioDeviceID deviceIdO;//全局播放音频设备id
cpp 复制代码
//回调函数,用在音频录制
void audioCallback(void *userdata, Uint8 * stream,
                   int len)
{
    Q_UNUSED(userdata);
    // Sint16* audioData = reinterpret_cast<Sint16*>(stream);
    // int numSamples = len / sizeof(Sint16);
    // for (int i = 0; i < numSamples; ++i) {
    //     // 假设放大倍数为 2
    //     audioData[i] *= 2;
    // }
	SDL_MixAudioFormat(stream, stream, AUDIO_S16SYS, len, 100);
    mp3InFILE.write((char *)stream,len);
    //从缓存区播放音频
    SDL_QueueAudio(deviceIdO,stream,len);
}
cpp 复制代码
	if(SDL_Init(SDL_INIT_AUDIO) < 0){
        qDebug() << "SDL  INIT ERROR" << SDL_GetError();
        return ;
    }
    SDL_AudioSpec want, have;
    SDL_zero(want);
    want.freq = 44100;
    want.format = AUDIO_S16SYS;
    want.channels = 2;
    want.samples = 288;
    want.callback = audioCallback;
    //参数iscapture 0表示播放音频  非0表示录制音频
    SDL_AudioDeviceID deviceId = SDL_OpenAudioDevice(nullptr, 2, &want, &have, SDL_AUDIO_ALLOW_FORMAT_CHANGE);
    //开启音频播放设备
    want.callback = nullptr;
    deviceIdO = SDL_OpenAudioDevice(nullptr, 0, &want, &have, SDL_AUDIO_ALLOW_FORMAT_CHANGE);
    if (deviceIdO == 0) {
        qDebug() << "SDL could not open audio device! SDL Error: " << SDL_GetError();
        return;
    }
	//分别开启音频录制和音频播放。
    SDL_PauseAudioDevice(deviceId,0);
    SDL_PauseAudioDevice(deviceIdO,0);
相关推荐
AI服务老曹6 分钟前
摄像机安装AI视频分析完整流程:从现场物理安装、硬解配置到算法POC效果验证
人工智能·算法·音视频
小柯南敲键盘19 分钟前
跨马翻译:跨境电商批量图片翻译与视频字幕工具推荐
人工智能·python·音视频
ai产品老杨15 小时前
AI视频分析并发优化完整流程:解决多路视频并发不足与高延迟排查指南
人工智能·音视频
小柯南敲键盘16 小时前
电商图片翻译工具推荐,批量处理主图视频字幕,免费试用
大数据·人工智能·python·音视频
程序员老陆1 天前
FFmpeg的AVFrame全部数据操作函数详解
ffmpeg·音视频·avframe
tech讯息1 天前
商业化内容生产适用企业级视频生成模型云平台推荐|从模型生成至审核分发全链路 AWS 选型方案
人工智能·音视频·aws
杀生丸学AI2 天前
【稀疏重建】StructSplat:基于非校准稀疏视图的可泛化3DGS
深度学习·3d·音视频·transformer·三维重建·空间智能
小柯南敲键盘2 天前
跨境电商图片翻译工具推荐:批量AI翻译+视频字幕+智能抠图
人工智能·python·音视频
DogDaoDao2 天前
【H266/VVC提案解读】ITU-T H.274 (V4) 规范深度解读 — 视频编码 SEI 消息的全面演进
音视频·实时音视频·视频编解码·流媒体·h266·vvc·视频编解码标准
程序员老陆2 天前
FFmpeg RTSP 解复用器(rtsp demuxer)完全解析:从「能播」到「稳播」的参数圣经
ffmpeg·音视频·拉流·rtsp