# 处理原始音频数据

# 简介

原始音频数据,又称音频裸数据,是指音视频传输过程中获取到的纯音频数据。常见的原始音频数据格式为 PCM(脉冲编码调制)。这些音频采样数据(PCM等)经过音频编码压缩成为音频码流,从而降低音频的数据量,便于存储和传输。

菊风提供修改原始音频数据的功能。当有自行处理音视数据的需求时,您可以对捕捉到的语音数据进行处理;也可以对接收到的语音数据进行处理。

# 前提条件

在修改原始音频数据前,确保已经初始化了 JCMediaDevice 模块。

# 集成步骤

  1. 创建 JCAudioFrameCallbackImpl 类,继承JCAudioFrameCallback (opens new window) 接口。重写 onAudioInputFrame, onAudioOutputFrame 函数。
  2. 在开始通话前调用 setAudioFrameCallback (opens new window) 。传入 JCAudioFrameCallbackImpl 实例对象。
  3. 发起通话或者加入频道。
  4. 在收到 onLeave 或 onStop 或 onCallItemRemove 后调用 setAudioFrameCallback (opens new window) ,传入 null 来释放语音观测器对象。
// 创建 JCAudioFrameCallbackImpl 类,继承JCAudioFrameCallback
// 实现 onAudioInputFrame, onAudioOutputFrame 接口
public interface JCAudioFrameCallback
{
    /**
    * 获得采集的音频
    *
    * @param inputId      音频输入设备
    * @param sampleRateHz 输入源的采样频率
    * @param channels     输入源的频道数量
    * @param buf          该帧的采样数据
    * @param len          采样数据的字节长度
    * @param playDelayMS  播放延时
    * @param recDelayMS   采集延时
    * @param clockDrift   时钟漂移
    */
    void onAudioInputFrame(string inputId, int sampleRateHz, int channels, IntPtr buf, int len, int playDelayMS, int recDelayMS, int clockDrift);

    /**
    * 获得播放的音频
    *
    * @param outputId     音频输出设备
    * @param sampleRateHz 输出源的采集频率
    * @param channels     输出源的采样通道数
    * @param buf          该帧的采样数据
    * @param len          采样数据的字节长度
    */
    void onAudioOutputFrame(string outputId, int sampleRateHz, int channels, IntPtr buf, int len);
}

JCAudioFrameCallbackImpl mAudioFrameCallbackImpl;
// 设置音频数据监听
mediaDevice.setAudioFrameCallback(mAudioFrameCallbackImpl);
// 取消音频数据监听
mediaDevice.setAudioFrameCallback(null);
最后更新时间: 3/30/2021, 2:57:27 PM