鸿蒙（API 12 Beta2版）媒体开发【使用AudioCapturer开发音频录制功能】

news2024/9/24 8:23:25

如何选择音频录制开发方式

系统提供了多样化的API，来帮助开发者完成音频录制的开发，不同的API适用于不同录音输出格式、音频使用场景或不同开发语言。因此，选择合适的音频录制API，有助于降低开发工作量，实现更佳的音频录制效果。

  • [AudioCapturer]：用于音频输入的的ArkTS/JS API，仅支持PCM格式，需要应用持续读取音频数据进行工作。应用可以在音频输出后添加数据处理，要求开发者具备音频处理的基础知识，适用于更专业、更多样化的媒体录制应用开发。
  • [OpenSL ES]：一套跨平台标准化的音频Native API，同样提供音频输入原子能力，仅支持PCM格式，适用于从其他嵌入式平台移植，或依赖在Native层实现音频输入功能的录音应用使用。
  • [OHAudio]：用于音频输入的Native API，此API在设计上实现归一，同时支持普通音频通路和低时延通路。仅支持PCM格式，适用于依赖Native层实现音频输入功能的场景。

除上述方式为，也可以通过Media Kit实现音频播放。

  • [AVRecorder]：用于音频录制的ArkTS/JS API，集成了音频输入录制、音频编码和媒体封装的功能。开发者可以直接调用设备硬件如麦克风录音，并生成m4a音频文件。

开发音频录制应用须知

应用可以调用麦克风录制音频，但该行为属于隐私敏感行为，在调用麦克风前，需要先向用户申请权限“ohos.permission.MICROPHONE”:

  1. [声明权限]
  2. [向用户申请授权]

如何使用和管理麦克风请参考[管理麦克风]。

使用AudioCapturer开发音频录制功能

AudioCapturer是音频采集器，用于录制PCM（Pulse Code Modulation）音频数据，适合有音频开发经验的开发者实现更灵活的录制功能。

开发指导

使用AudioCapturer录制音频涉及到AudioCapturer实例的创建、音频采集参数的配置、采集的开始与停止、资源的释放等。本开发指导将以一次录制音频数据的过程为例，向开发者讲解如何使用AudioCapturer进行音频录制，建议搭配[AudioCapturer的API说明]阅读。

下图展示了AudioCapturer的状态变化，在创建实例后，调用对应的方法可以进入指定的状态实现对应的行为。需要注意的是在确定的状态执行不合适的方法可能导致AudioCapturer发生错误，建议开发者在调用状态转换的方法前进行状态检查，避免程序运行产生预期以外的结果。

图1 AudioCapturer状态变化示意图

1

使用on(‘stateChange’)方法可以监听AudioCapturer的状态变化，每个状态对应值与说明见[AudioState]。

开发步骤及注意事项

  1. 配置音频采集参数并创建AudioCapturer实例，音频采集参数的详细信息可以查看[AudioCapturerOptions]。
 import { audio } from '@kit.AudioKit';
 
 let audioStreamInfo: audio.AudioStreamInfo = {
   samplingRate: audio.AudioSamplingRate.SAMPLE_RATE_48000, // 采样率
   channels: audio.AudioChannel.CHANNEL_2, // 通道
   sampleFormat: audio.AudioSampleFormat.SAMPLE_FORMAT_S16LE, // 采样格式
   encodingType: audio.AudioEncodingType.ENCODING_TYPE_RAW // 编码格式
 };
 
 let audioCapturerInfo: audio.AudioCapturerInfo = {
   source: audio.SourceType.SOURCE_TYPE_MIC,
   capturerFlags: 0
 };
 
 let audioCapturerOptions: audio.AudioCapturerOptions = {
   streamInfo: audioStreamInfo,
   capturerInfo: audioCapturerInfo
 };
 
 audio.createAudioCapturer(audioCapturerOptions, (err, data) => {
   if (err) {
     console.error(`Invoke createAudioCapturer failed, code is ${err.code}, message is ${err.message}`);
   } else {
     console.info('Invoke createAudioCapturer succeeded.');
     let audioCapturer = data;
   }
 });
  1. 调用on(‘readData’)方法，订阅监听音频数据读入回调。
 import { BusinessError } from '@kit.BasicServicesKit';
 import { fileIo } from '@kit.CoreFileKit';

 let bufferSize: number = 0;
 class Options {
   offset?: number;
   length?: number;
 }

 let path = getContext().cacheDir;
 let filePath = path + '/StarWars10s-2C-48000-4SW.wav';
 let file: fileIo.File = fileIo.openSync(filePath, fileIo.OpenMode.READ_WRITE | fileIo.OpenMode.CREATE);

 let readDataCallback = (buffer: ArrayBuffer) => {
   let options: Options = {
     offset: bufferSize,
     length: buffer.byteLength
   }
   fileIo.writeSync(file.fd, buffer, options);
   bufferSize += buffer.byteLength;
 }
 audioCapturer.on('readData', readDataCallback);
  1. 调用start()方法进入running状态，开始录制音频。
 import { BusinessError } from '@kit.BasicServicesKit';

 audioCapturer.start((err: BusinessError) => {
   if (err) {
     console.error(`Capturer start failed, code is ${err.code}, message is ${err.message}`);
   } else {
     console.info('Capturer start success.');
   }
 });
  1. 调用stop()方法停止录制。
 import { BusinessError } from '@kit.BasicServicesKit';

 audioCapturer.stop((err: BusinessError) => {
   if (err) {
     console.error(`Capturer stop failed, code is ${err.code}, message is ${err.message}`);
   } else {
     console.info('Capturer stopped.');
   }
 });
  1. 调用release()方法销毁实例，释放资源。
 import { BusinessError } from '@kit.BasicServicesKit';

 audioCapturer.release((err: BusinessError) => {
   if (err) {
     console.error(`capturer release failed, code is ${err.code}, message is ${err.message}`);
   } else {
     console.info('capturer released.');
   }
 });

完整示例

下面展示了使用AudioCapturer录制音频的完整示例代码。

import { audio } from '@kit.AudioKit';
import { BusinessError } from '@kit.BasicServicesKit';
import { fileIo } from '@kit.CoreFileKit';

const TAG = 'AudioCapturerDemo';

class Options {
  offset?: number;
  length?: number;
}

let context = getContext(this);
let bufferSize: number = 0;
let audioCapturer: audio.AudioCapturer | undefined = undefined;
let audioStreamInfo: audio.AudioStreamInfo = {
  samplingRate: audio.AudioSamplingRate.SAMPLE_RATE_48000, // 采样率
  channels: audio.AudioChannel.CHANNEL_2, // 通道
  sampleFormat: audio.AudioSampleFormat.SAMPLE_FORMAT_S16LE, // 采样格式
  encodingType: audio.AudioEncodingType.ENCODING_TYPE_RAW // 编码格式
}
let audioCapturerInfo: audio.AudioCapturerInfo = {
  source: audio.SourceType.SOURCE_TYPE_MIC, // 音源类型
  capturerFlags: 0 // 音频采集器标志
}
let audioCapturerOptions: audio.AudioCapturerOptions = {
  streamInfo: audioStreamInfo,
  capturerInfo: audioCapturerInfo
}

let path = getContext().cacheDir;
let filePath = path + '/StarWars10s-2C-48000-4SW.wav';
let file: fileIo.File = fileIo.openSync(filePath, fileIo.OpenMode.READ_WRITE | fileIo.OpenMode.CREATE);

let readDataCallback = (buffer: ArrayBuffer) => {
   let options: Options = {
      offset: bufferSize,
      length: buffer.byteLength
   }
   fileIo.writeSync(file.fd, buffer, options);
   bufferSize += buffer.byteLength;
}

// 初始化，创建实例，设置监听事件
function init() {
  audio.createAudioCapturer(audioCapturerOptions, (err, capturer) => { // 创建AudioCapturer实例
    if (err) {
      console.error(`Invoke createAudioCapturer failed, code is ${err.code}, message is ${err.message}`);
      return;
    }
    console.info(`${TAG}: create AudioCapturer success`);
    audioCapturer = capturer;
    if (audioCapturer !== undefined) {
       (audioCapturer as audio.AudioCapturer).on('readData', readDataCallback);
    }
  });
}

// 开始一次音频采集
function start() {
  if (audioCapturer !== undefined) {
    let stateGroup = [audio.AudioState.STATE_PREPARED, audio.AudioState.STATE_PAUSED, audio.AudioState.STATE_STOPPED];
    if (stateGroup.indexOf((audioCapturer as audio.AudioCapturer).state.valueOf()) === -1) { // 当且仅当状态为STATE_PREPARED、STATE_PAUSED和STATE_STOPPED之一时才能启动采集
      console.error(`${TAG}: start failed`);
      return;
    }

    // 启动采集
    (audioCapturer as audio.AudioCapturer).start((err: BusinessError) => {
      if (err) {
        console.error('Capturer start failed.');
      } else {
        console.info('Capturer start success.');
      }
    });
  }
}

// 停止采集
function stop() {
  if (audioCapturer !== undefined) {
    // 只有采集器状态为STATE_RUNNING或STATE_PAUSED的时候才可以停止
    if ((audioCapturer as audio.AudioCapturer).state.valueOf() !== audio.AudioState.STATE_RUNNING && (audioCapturer as audio.AudioCapturer).state.valueOf() !== audio.AudioState.STATE_PAUSED) {
      console.info('Capturer is not running or paused');
      return;
    }

    //停止采集
    (audioCapturer as audio.AudioCapturer).stop((err: BusinessError) => {
      if (err) {
        console.error('Capturer stop failed.');
      } else {
        fileIo.close(file);
        console.info('Capturer stop success.');
      }
    });
  }
}

// 销毁实例，释放资源
function release() {
  if (audioCapturer !== undefined) {
    // 采集器状态不是STATE_RELEASED或STATE_NEW状态，才能release
    if ((audioCapturer as audio.AudioCapturer).state.valueOf() === audio.AudioState.STATE_RELEASED || (audioCapturer as audio.AudioCapturer).state.valueOf() === audio.AudioState.STATE_NEW) {
      console.info('Capturer already released');
      return;
    }

    //释放资源
    (audioCapturer as audio.AudioCapturer).release((err: BusinessError) => {
      if (err) {
        console.error('Capturer release failed.');
      } else {
        console.info('Capturer release success.');
      }
    });
  }
}

最后呢

很多开发朋友不知道需要学习那些鸿蒙技术？鸿蒙开发岗位需要掌握那些核心技术点？为此鸿蒙的开发学习必须要系统性的进行。

而网上有关鸿蒙的开发资料非常的少，假如你想学好鸿蒙的应用开发与系统底层开发。你可以参考这份资料，少走很多弯路，节省没必要的麻烦。由两位前阿里高级研发工程师联合打造的《鸿蒙NEXT星河版OpenHarmony开发文档》里面内容包含了（ArkTS、ArkUI开发组件、Stage模型、多端部署、分布式应用开发、音频、视频、WebGL、OpenHarmony多媒体技术、Napi组件、OpenHarmony内核、Harmony南向开发、鸿蒙项目实战等等）鸿蒙（Harmony NEXT）技术知识点

如果你是一名Android、Java、前端等等开发人员，想要转入鸿蒙方向发展。可以直接领取这份资料辅助你的学习。下面是鸿蒙开发的学习路线图。

在这里插入图片描述

针对鸿蒙成长路线打造的鸿蒙学习文档。话不多说，我们直接看详细鸿蒙（OpenHarmony ）手册（共计1236页）与鸿蒙（OpenHarmony ）开发入门视频，帮助大家在技术的道路上更进一步。

  • 《鸿蒙 (OpenHarmony)开发学习视频》
  • 《鸿蒙生态应用开发V2.0白皮书》
  • 《鸿蒙 (OpenHarmony)开发基础到实战手册》
  • OpenHarmony北向、南向开发环境搭建
  • 《鸿蒙开发基础》
  • 《鸿蒙开发进阶》
  • 《鸿蒙开发实战》

在这里插入图片描述

总结

鸿蒙—作为国家主力推送的国产操作系统。部分的高校已经取消了安卓课程，从而开设鸿蒙课程；企业纷纷跟进启动了鸿蒙研发。

并且鸿蒙是完全具备无与伦比的机遇和潜力的；预计到年底将有 5,000 款的应用完成原生鸿蒙开发，未来将会支持 50 万款的应用。那么这么多的应用需要开发，也就意味着需要有更多的鸿蒙人才。鸿蒙开发工程师也将会迎来爆发式的增长，学习鸿蒙势在必行！ 自↓↓↓拿

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1989571.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

HDFS写入数据的流程图

HDFS写入数据的流程图

1.客户端向namenode发送请求，请示写入数据 2.namenode接受请求后，判断这个用户是否有写入权限，如果不具备直接报错；如果有写入权限，接着判断在要写入的目录下是否已经存在这个文件，如果存在，直…
阅读更多...
通过python搭建文件传输服务器；支持多台电脑之间互相传输文件（支持局域网或广域网）（应该也能用于虚拟机和宿主机之间）

通过python搭建文件传输服务器；支持多台电脑之间互相传输文件（支持局域网或广域网）（应该也能用于虚拟机和宿主机之间）

因为公司网络防火墙限制，所以在公司的电脑之间传输文件还是非常不方便的；所以自己搭建了一个文件传输服务器，用于多台电脑间的文件传输； 先放上最终效果： 文章目录 一、运行环境要求二、环境搭建2.1 安装python2.2 搭建虚拟环境方法1：创建Anaconda虚拟环境方法2：创建pyt…
阅读更多...
Java线程池的这几个大坑，你踩过几个？

Java线程池的这几个大坑，你踩过几个？

首先看一个简单的例子：代码可能会抛出空指针异常,但这个异常就会被吞掉。 要优雅解决问题，可以为线程池设置一个全局的异常处理器,使用自定义的线程工厂来设置! java public class CustomThreadFactory implements ThreadFactory { private final Threa…
阅读更多...
CTFHUB-web-RCE-综合过滤练习

CTFHUB-web-RCE-综合过滤练习

开启题目 查看网页源代码发现这次网页对 | 、 && 、 || 、 \ 、 / 、; ，都进行了过滤处理 发现换行符 %0a 和回车符 %0d 可以进行测试，在 URL 后面拼接访问 127.0.0.1%0als 用 ls flag_is_here 查看 flag 文件中的内容，发现回显为空…
阅读更多...
11-电阻 电容元件的创建

11-电阻 电容元件的创建

1. 2.格点设置 3.当设置完线条的时候，格点重新设置回100mil 4.更改管脚长度，宽度
阅读更多...
vscode安装与配置本地c/c++编译调试环境

vscode安装与配置本地c/c++编译调试环境

目录 （1）安装vscode和常用插件 1.下载安装vscode 2.安装常用插件 （2）本地安装和配置编译器 1.安装编译器 2.vscode配置编译器 第1种：全局配置 第2种：为当前项目个性化配置 （3&#xff…
阅读更多...
海量数据处理商用短链接生成器平台 - 9

海量数据处理商用短链接生成器平台 - 9

第二十六章 短链服务-冗余双写架构删除和更新消费者开发实战 第1集 冗余双写架构-更新短链消费者开发实战 简介： 短链服务-更新短链-消费者开发实战 具体步骤见代码 第2集 冗余双写架构-更新短链消费者链路测试 简介： 冗余双写架构-更新短链消费者链…
阅读更多...
从TiDB迁移到OceanBase的实践分享

从TiDB迁移到OceanBase的实践分享

本文来自OceanBase热心用户的分享 近期，我们计划将业务数据库从TiDB迁移到OceanBase，但面临的一个主要挑战是如何更平滑的完成这一迁移过程。经过研究，了解到OceanBase提供的OMS数据迁移工具能够支持从TiDB到OceanBase的迁移，并且…
阅读更多...
使用snap安装docker配置阿里云镜像加速

使用snap安装docker配置阿里云镜像加速

使用snap安装docker非常的简单，一条命令即可 snap install docker 但是通过这个命令安装的docker, 配置阿里云镜像跟常规安装的配置起来不太一样, 下面讲一下配置流程 修改docker配置文件/var/snap/docker/current/config/daemon.json 这个文件应该是已经创建好…
阅读更多...
13-按键的元件模型创建

13-按键的元件模型创建

1.画线的时候，栅格切为10mil 2.放置管脚的时候，栅格切为100mil
阅读更多...
贝叶斯网络介绍与求解方法

贝叶斯网络介绍与求解方法

贝叶斯网络综述 1. 引言2. 贝叶斯网络原理介绍3. 求解贝叶斯网络的各种方法3.1 精确推理算法3.2 近似推理算法3.3 学习贝叶斯网络的结构和参数3.3.1 MMPC（Max-Min Parents and Children）3.3.2 MMHC（Max-Min Hill-Climbing）3.3.3 I…
阅读更多...
论文阅读报告: 在时间双向图上查询基于时间的的密集子图 | ICDE 2024

论文阅读报告: 在时间双向图上查询基于时间的的密集子图 | ICDE 2024

摘要 本文提出了一个新的模型（α, β, T）-core，用于在时间双向图上寻找凝聚子图。时间双向图中，不同实体之间的关系随着时间的推移而变化。为了提高查询效率，本文提出了顶点分区和时间分区的历史索引（VH-I…
阅读更多...
windows docker容器部署前端项目

windows docker容器部署前端项目

一、介绍 Docker 是一个开源的平台，旨在简化应用程序的开发、部署和运行。它通过使用容器（containers）来实现这一点。容器是一种轻量级、可移植的虚拟化方式，可以在不同的环境中一致地运行软件。 Docker 的主要作用和优点包括&a…
阅读更多...
C语言 ——— 学习、使用memcpy函数 并模拟实现

C语言 ——— 学习、使用memcpy函数 并模拟实现

目录 memcpy函数的功能 学习memcpy函数​编辑 使用memcpy函数 模拟实现memcpy函数 memcpy函数的功能 memcpy函数是内存拷贝函数，用于把任意类型的数据的内存拷贝到另一个同类型的数据上 学习memcpy函数 函数的参数： void* destination&#xff1…
阅读更多...
C++基础编程的学习2

C++基础编程的学习2

has-a（组合关系） 在C中，has-a关系是一种对象之间的组合关系，表示一个类的对象包含另一个类的对象作为其成员。 前向引用说明 在全局命名作用域中声明函数，可以避免递归调用时的函数重名问题。前向声明允许我们声明一…
阅读更多...
使用Pinata在IPFS上存储NFT图片的实践

使用Pinata在IPFS上存储NFT图片的实践

文章目录 前言一、什么是IPFS？二、为什么NFT需要IPFS？三、 Pinata：IPFS上的存储解决方案四、 实践：使用Pinata存储NFT图片1. 注册2. 获取API密钥与网关3. 上传图片到IPFS 总结 前言 随着区块链技术的快速发展，NFT&…
阅读更多...
【iOS】OC关键字总结及底层原理（下）

【iOS】OC关键字总结及底层原理（下）

目录 weak实现原理objc_initWeak()objc_storeWeak()weak_register_no_lock()weak_entry_for_referent()dealloc关于弱引用的处理weak相关问题 __autoreleasing关键字自动释放池__autoreleasing修饰变量 weak实现原理 weak弱引用指针会存储在SideTable里的weak弱引用表里面&…
阅读更多...
实验室冷冻干燥机的安装与调试步骤

实验室冷冻干燥机的安装与调试步骤

实验室冷冻干燥机是一种重要的科研设备，广泛应用于生物、化学、食品科学等领域。正确安装与调试冷冻干燥机，不仅能确保设备的正常运行，还能延长其使用寿命。本文将详细介绍实验室冷冻干燥机的安装与调试步骤，帮助用户顺利完成设备…
阅读更多...
Java中等题-最大子数组和（力扣）

Java中等题-最大子数组和（力扣）

给你一个整数数组 nums ，请你找出一个具有最大和的连续子数组（子数组最少包含一个元素），返回其最大和。 子数组 是数组中的一个连续部分。 示例 1： 输入：nums [-2,1,-3,4,-1,2,1,-5,4] 输出：…
阅读更多...
SSM城市垃圾分类管理系统-计算机毕业设计源码44582

SSM城市垃圾分类管理系统-计算机毕业设计源码44582

摘 要 在当前全球环境问题日益突出的背景下，城市垃圾分类成为推动可持续发展和环境保护的重要举措之一。然而，传统的垃圾处理方式存在效率低下、资源浪费和环境污染等问题。因此，开发一个基于Java编程语言、MySQL数据库和HTML前端技术的高效…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023