通过编程录音
开发录音功能的主要步骤是:
- 注册设备
- 获取输入格式对象
- 打开设备
- 采集数据
- 释放资源
主要步骤
需要用到的FFmpeg库有4个。
| extern "C" { |
| |
| #include <libavdevice/avdevice.h> |
| |
| #include <libavformat/avformat.h> |
| |
| #include <libavutil/avutil.h> |
| |
| #include <libavcodec/avcodec.h> |
| } |
权限申请
在Mac平台,有2个注意点:
- 需要在Info.plist中添加麦克风的使用说明,申请麦克风的使用权限
- 使用Debug模式运行程序
- 不然会出现闪退的情况
| <?xml version="1.0" encoding="UTF-8"?> |
| <!DOCTYPE plist PUBLIC "-//Apple//DTD PLIST 1.0//EN" "http://www.apple.com/DTDs/PropertyList-1.0.dtd"> |
| <plist version="1.0"> |
| <dict> |
| <key>NSMicrophoneUsageDescription</key> |
| <string>使用麦克风采集您的天籁之音</string> |
| </dict> |
| </plist> |
注册设备
在整个程序的运行过程中,只需要执行1次注册设备的代码。
获取输入格式对象
宏定义
Windows和Mac环境的格式名称、设备名称都是不同的,所以使用条件编译实现跨平台。
| |
| #ifdef Q_OS_WIN |
| |
| #define FMT_NAME "dshow" |
| |
| #define DEVICE_NAME "audio=麦克风阵列 (Realtek(R) Audio)" |
| #else |
| #define FMT_NAME "avfoundation" |
| #define DEVICE_NAME ":0" |
| #endif |
核心代码
根据格式名称获取输入格式对象,后面需要利用输入格式对象打开设备。
| AVInputFormat *fmt = av_find_input_format(FMT_NAME); |
| if (!fmt) { |
| |
| qDebug() << "找不到输入格式" << FMT_NAME; |
| return; |
| } |
打开设备
| |
| AVFormatContext *ctx = nullptr; |
| |
| int ret = avformat_open_input(&ctx, DEVICE_NAME, fmt, nullptr); |
| |
| if (ret < 0) { |
| char errbuf[1024] = {0}; |
| |
| av_strerror(ret, errbuf, sizeof (errbuf)); |
| qDebug() << "打开设备失败" << errbuf; |
| return; |
| } |
采集数据
宏定义
| #ifdef Q_OS_WIN |
| |
| #define FILENAME "F:/out.pcm" |
| #else |
| #define FILENAME "/Users/mj/Desktop/out.pcm" |
| #endif |
核心代码
| #include <QFile> |
| |
| |
| QFile file(FILENAME); |
| |
| |
| if (!file.open(QFile::WriteOnly)) { |
| qDebug() << "文件打开失败" << FILENAME; |
| |
| avformat_close_input(&ctx); |
| return; |
| } |
| |
| |
| int count = 50; |
| |
| |
| AVPacket *pkt = av_packet_alloc(); |
| while (count-- > 0) { |
| |
| ret = av_read_frame(ctx, pkt); |
| |
| if (ret == 0) { |
| |
| file.write((const char *) pkt->data, pkt->size); |
| |
| |
| av_packet_unref(pkt); |
| } else if (ret == AVERROR(EAGAIN)) { |
| continue; |
| } else { |
| char errbuf[1024]; |
| av_strerror(ret, errbuf, sizeof (errbuf)); |
| qDebug() << "av_read_frame error" << errbuf << ret; |
| break; |
| } |
| } |
释放资源
| |
| file.close(); |
| |
| |
| av_packet_free(&pkt); |
| |
| |
| avformat_close_input(&ctx); |
想要了解每一个函数的具体作用,可以查询:官方API文档。
获取录音设备的相关参数
| |
| void showSpec(AVFormatContext *ctx) { |
| |
| AVStream *stream = ctx->streams[0]; |
| |
| AVCodecParameters *params = stream->codecpar; |
| |
| qDebug() << params->channels; |
| |
| qDebug() << params->sample_rate; |
| |
| qDebug() << params->format; |
| |
| qDebug() << av_get_bytes_per_sample((AVSampleFormat) params->format); |
| |
| qDebug() << params->codec_id; |
| |
| qDebug() << av_get_bits_per_sample(params->codec_id); |
| } |
多线程
录音属于耗时操作,为了避免阻塞主线程,最好在子线程中进行录音操作。这里创建了一个继承自QThread的线程类,线程一旦启动(start),就会自动调用run函数。
.h
| #include <QThread> |
| |
| class AudioThread : public QThread { |
| Q_OBJECT |
| private: |
| void run(); |
| |
| public: |
| explicit AudioThread(QObject *parent = nullptr); |
| ~AudioThread(); |
| }; |
.cpp
| AudioThread::AudioThread(QObject *parent, |
| AVInputFormat *fmt, |
| const char *deviceName) |
| : QThread(parent), _fmt(fmt), _deviceName(deviceName) { |
| |
| connect(this, &AudioThread::finished, |
| this, &AudioThread::deleteLater); |
| } |
| |
| AudioThread::~AudioThread() { |
| |
| requestInterruption(); |
| quit(); |
| wait(); |
| } |
| |
| void AudioThread::run() { |
| |
| |
| } |
开启线程
| AudioThread *audioThread = new AudioThread(this); |
| audioThread->start(); |
结束线程
| |
| audioThread->requestInterruption(); |
| |
| |
| void AudioThread::run() { |
| |
| |
| while (!isInterruptionRequested()) { |
| |
| } |
| } |
改造录音代码
| |
| AVPacket *pkt = av_packet_alloc(); |
| while (!isInterruptionRequested()) { |
| |
| ret = av_read_frame(ctx, pkt); |
| |
| if (ret == 0) { |
| |
| file.write((const char *) pkt->data, pkt->size); |
| |
| |
| av_packet_unref(pkt); |
| } else if (ret == AVERROR(EAGAIN)) { |
| continue; |
| } else { |
| char errbuf[1024]; |
| av_strerror(ret, errbuf, sizeof (errbuf)); |
| qDebug() << "av_read_frame error" << errbuf << ret; |
| break; |
| } |
| } |
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 聊一聊 操作系统蓝屏 c0000102 的故障分析
· SQL Server 内存占用高分析
· .NET Core GC计划阶段(plan_phase)底层原理浅谈
· .NET开发智能桌面机器人:用.NET IoT库编写驱动控制两个屏幕
· 用纯.NET开发并制作一个智能桌面机器人:从.NET IoT入门开始
· 我干了两个月的大项目,开源了!
· 推荐一款非常好用的在线 SSH 管理工具
· 聊一聊 操作系统蓝屏 c0000102 的故障分析
· 千万级的大表,如何做性能调优?
· .NET周刊【1月第1期 2025-01-05】