| 返回 | 名称 |
|---|---|
| BYTERTC_API IVideoFrame* | BuildVideoFrame |
| BYTERTC_API bool | PushExternalVideoFrame |
| BYTERTC_API IAudioFrame* | BuildAudioFrame |
| BYTERTC_API bytertc::IRtcEngine* | CreateRtcEngine |
| BYTERTC_API void | DestroyRtcEngine |
| BYTERTC_API const char* | GetErrorDescription |
| BYTERTC_API const char* | GetSDKVersion |
BYTERTC_API IVideoFrame* bytertc::BuildVideoFrame(
const VideoFrameBuilder& builder)
创建 IVideoFrame
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| builder | const VideoFrameBuilder& | 视频帧构建实例,参看 VideoFrameBuilder |
BYTERTC_API bool bytertc::PushExternalVideoFrame(
IRtcEngine* engine,
const IVideoFrame* frame)
发送外部源视频数据
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| engine | IRtcEngine* | 要设置的引擎,详见 IRtcEngine |
| frame | const IVideoFrame* | 输入视频帧,详见 IVideoFrame |
注意 1.支持 YUV420P,NV12,D3D texture,Cuda 内存,OpenGL texture等格式的视频帧。 2.该函数运行在用户调用线程内
BYTERTC_API IAudioFrame* bytertc::BuildAudioFrame(
const AudioFrameBuilder& builder)
创建 IAudioFrame
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| builder | const AudioFrameBuilder& | 音频帧构建实例,参看 AudioFrameBuilder |
BYTERTC_API bytertc::IRtcEngine* bytertc::CreateRtcEngine(
const char* app_id,
bytertc::IRtcEngineEventHandler* event_handler,
const char* parameters)
创建 RTCEngine 实例。
如果当前线程中未创建引擎实例,那么你必须先使用此方法,以使用 RTC 提供的各种音视频能力。
如果当前线程中已创建了引擎实例,再次调用此方法时,会创建另一个独立的引擎实例。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| app_id | const char* | 每个应用的唯一标识符。只有使用相同的 app_id 生成的实例,才能够进行音视频通信。 |
| event_handler | bytertc::IRtcEngineEventHandler* | SDK 回调给应用层的 Callback 对象,详见 IRtcEngineEventHandler 。 |
| parameters | const char* | 用以覆盖默认参数的本引擎实例参数。JSON 字符串格式。 |
返回值
注意
BYTERTC_API void bytertc::DestroyRtcEngine(
bytertc::IRtcEngine* engine)
销毁由 CreateRtcEngine 创建的 RTCEngine 实例,并释放所有相关资源。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| engine | bytertc::IRtcEngine* | CreateRtcEngine 时,返回的实例。 |
注意
BYTERTC_API const char* bytertc::GetErrorDescription(
int code)
获取错误码的描述
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| code | int | 需要获取描述的错误码 |
返回值 错误码的描述
注意 该接口是通用功能,调用时不需要依赖引擎对象。
BYTERTC_API const char* bytertc::GetSDKVersion();
获取当前 SDK 版本信息。
返回值 当前 SDK 版本信息。
class bytertc::IAudioMixingManager
混音管理类
| 返回 | 名称 |
|---|---|
| virtual void | StartAudioMixing |
| virtual void | StopAudioMixing |
| virtual void | PauseAudioMixing |
| virtual void | ResumeAudioMixing |
| virtual void | PreloadAudioMixing |
| virtual void | UnloadAudioMixing |
| virtual void | SetAudioMixingVolume |
| virtual int | GetAudioMixingDuration |
| virtual int | GetAudioMixingCurrentPosition |
| virtual void | SetAudioMixingPosition |
| virtual void | SetAudioMixingDualMonoMode |
| virtual void | SetAudioMixingPitch |
| virtual void | SetAudioMixingProgressInterval |
| virtual void | SetAudioMixingLoudness |
| virtual void | EnableAudioMixingFrame |
| virtual void | DisableAudioMixingFrame |
| virtual int | PushAudioMixingFrame |
| virtual int | GetAudioTrackCount |
| virtual void | SelectAudioTrack |
virtual void bytertc::IAudioMixingManager::StartAudioMixing(
int mix_id,
const char * file_path,
const AudioMixingConfig& config)
开始播放音乐文件及混音
传入参数
| 参数名 | 类型 | 说明 | ||||||||||||||||||||||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| mix_id | int | 混音 ID 混音 ID 用于标识混音,请保证混音 ID 唯一性。 如果已经通过 PreloadAudioMixing 将音效加载至内存,确保此处的 ID 与 PreloadAudioMixing 设置的 ID 相同。 如果使用相同的 ID 重复调用本方法,前一次混音会停止,后一次混音开始,且 SDK 会使用 OnAudioMixingStateChanged 回调通知前一次混音已停止。 |
||||||||||||||||||||||||||||||||||||||||
| file_path | const char* | 用于混音文件路径。可以是本地文件的绝对路径。 不同平台支持的音频文件格式:
|
||||||||||||||||||||||||||||||||||||||||
| config | const AudioMixingConfig& | 混音配置 可以设置混音的播放次数、是否本地播放混音、以及是否将混音发送至远端,详见 AudioMixingConfig |
注意
virtual void bytertc::IAudioMixingManager::StopAudioMixing(
int mix_id)
停止播放音乐文件及混音
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
注意
virtual void bytertc::IAudioMixingManager::PauseAudioMixing(
int mix_id)
暂停播放音乐文件及混音
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
注意
virtual void bytertc::IAudioMixingManager::ResumeAudioMixing(
int mix_id)
恢复播放音乐文件及混音
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
注意
virtual void bytertc::IAudioMixingManager::PreloadAudioMixing(
int mix_id,
const char* file_path)
预加载指定音乐文件到内存中
传入参数
| 参数名 | 类型 | 说明 | ||||||||||||||||||||||||||||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| mix_id | int | 混音 ID 应用调用者维护,请保证唯一性。 如果使用相同的 mix_id 调用本方法,后一次会覆盖前一次。 如果先调用 StartAudioMixing ,再使用相同的 mix_id 调用本方法 ,会先回调 OnAudioMixingStateChanged 上一个混音停止,然后加载后一个混音。 使用一个 mix_id 调用本方法预加载 A.mp3 后,如果需要使用相同的 mix_id 调用 StartAudioMixing 播放 B.mp3,请先调用 UnloadAudioMixing 卸载 A.mp3 ,否则会报错 kAudioMixingErrorLoadConflict。 |
||||||||||||||||||||||||||||||||||||||||
| file_path | const char* | 用于混音文件路径。可以是本地文件的绝对路径。 不同平台支持的音频文件格式:
如果音乐文件长度超过 20s,会回调加载失败,见 OnAudioMixingStateChanged。 |
注意
virtual void bytertc::IAudioMixingManager::UnloadAudioMixing(
int mix_id)
卸载指定音乐文件
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
注意 不论音乐文件是否播放,调用本方法卸载该文件后,SDK 会回调通知混音已停止,见 OnAudioMixingStateChanged。
virtual void bytertc::IAudioMixingManager::SetAudioMixingVolume(
int mix_id,
int volume,
AudioMixingType type)
调节混音的音量大小,包括音频文件混音和 PCM 混音。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
| volume | int | 混音音量相对原音量的比值。范围为 [0, 400],建议范围是 [0, 100]。 • 0:静音 • 100:原始音量(默认值) • 400: 最大可调音量 (自带溢出保护) |
| type | AudioMixingType | 混音类型。是否本地播放、以及是否发送到远端,详见 AudioMixingType。 |
virtual int bytertc::IAudioMixingManager::GetAudioMixingDuration(
int mix_id)
获取音乐文件时长
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
返回值
注意 调用本方法获取音乐文件时长前,需要先调用 PreloadAudioMixing 或 StartAudioMixing。
virtual int bytertc::IAudioMixingManager::GetAudioMixingCurrentPosition(
int mix_id)
获取音乐文件播放进度
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
返回值
注意 调用本方法获取音乐文件播放进度前,需要先调用 StartAudioMixing 开始播放音乐文件。
virtual void bytertc::IAudioMixingManager::SetAudioMixingPosition(
int mix_id,
int position)
设置音频文件的起始播放位置
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
| position | int | 音频文件起始播放位置,单位为毫秒。 你可以通过 GetAudioMixingDuration 获取音频文件总时长,position 的值不得大于音频文件总时长。 |
注意
virtual void bytertc::IAudioMixingManager::SetAudioMixingDualMonoMode(
int mix_id,
AudioMixingDualMonoMode mode)
设置当前音频文件的声道模式
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
| mode | AudioMixingDualMonoMode | 声道模式。默认的声道模式和源文件一致,详见 AudioMixingDualMonoMode。 |
注意
virtual void bytertc::IAudioMixingManager::SetAudioMixingPitch(
int mix_id,
int pitch)
开启本地播放音乐文件变调功能,多用于 K 歌场景。
使用该方法,你可以对本地播放音乐文件的音调进行升调或降调等调整。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
| pitch | int | 相对于音乐文件原始音调的升高/降低值,取值范围[-12,12],默认值为 0,即不做调整。 取值范围内每相邻两个值的音高距离相差半音,正值表示升调,负值表示降调,设置的绝对值越大表示音调升高或降低越多。 超出取值范围则设置失败,并且会触发 OnAudioMixingStateChanged 回调,提示 AudioMixingState 状态为 AUDIO_MIXING_STATE_FAILED 混音播放失败,AudioMixingError 错误码为 AUDIO_MIXING_ERROR_ID_TYPE_INVALID_PITCH 设置混音文件音调不合法。 |
注意 本方法需要在调用 StartAudioMixing 开始播放音频文件后、调用 StopAudioMixing 停止播放音频文件前使用,否则会触发 OnAudioMixingStateChanged 回调报错
virtual void bytertc::IAudioMixingManager::SetAudioMixingProgressInterval(
int mix_id,
int64_t interval)
设置混音时音频文件播放进度回调的间隔
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID 可以通过多次调用本接口传入不同的 ID 对多个 ID 进行间隔设置。 |
| interval | int64_t | 音频文件播放进度回调的时间间隔,单位毫秒。 • interval 的值为大于 0 的 10 的倍数,当设置的值不能被 10 整除时,则默认向上取整 10,如设为 52ms 时会默认调整为 60ms。设置完成后 SDK 将会按照设置的时间间隔触发 OnAudioMixingPlayingProgress 回调。 • interval 的值小于等于 0 时,不会触发进度回调。 |
注意 本方法需要在调用 StartAudioMixing 开始播放音频文件后、调用 StopAudioMixing 停止播放音频文件前使用,否则会触发 OnAudioMixingStateChanged 回调报错。 若想在音乐文件开始播放前设置播放进度回调间隔,你需调用 StartAudioMixing 在 AudioMixingConfig 中设置时间间隔,开始播放后可以通过此接口更新回调间隔。
virtual void bytertc::IAudioMixingManager::SetAudioMixingLoudness(
int mix_id,
float loudness)
如果你需要使用 EnableVocalInstrumentBalance 对混音使音频文件/PCM 音频数据进行音量调整,你必须通过此接口传入其原始响度。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mixId | float loudness | 混音 ID |
| loudness | float | 原始响度,单位:lufs,取值范围为 [-70.0, 0.0]。 当设置的值小于 -70.0lufs 时,则默认调整为 -70.0lufs,大于 0.0lufs 时,则不对该响度做音均衡处理。默认值为 1.0lufs,即不做处理。 |
注意 建议在 StartAudioMixing 开始播放音频文件之前调用该接口,以免播放过程中的音量突变导致听感体验下降。
virtual void bytertc::IAudioMixingManager::EnableAudioMixingFrame(
int mix_id,
AudioMixingType type)
启动外部音频流混音
启动 PCM 音频数据混音。
要实现多个 PCM 音频数据混音,多次调用本方法,并传入不同的 mix_id。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID,用于标识混音,保证混音 ID 唯一性。 如果使用相同的 ID 重复调用本方法后,前一次混音会停止,后一次混音开始,会收到 OnAudioMixingStateChanged 通知前一次混音已停止。 |
| type | AudioMixingType | 混音播放类型 是否本地播放、以及是否发送到远端,详见 AudioMixingType。 |
注意
virtual void bytertc::IAudioMixingManager::DisableAudioMixingFrame(
int mix_id)
关闭 PCM 混音
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID。 |
virtual int bytertc::IAudioMixingManager::PushAudioMixingFrame(
int mix_id,
IAudioFrame* audio_frame)
推送 PCM 音频帧数据用于混音
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID。 |
| audioFrame | IAudioFrame* audio_frame | 音频帧,详见 IAudioFrame。 |
返回值
注意
virtual int bytertc::IAudioMixingManager::GetAudioTrackCount(
int mix_id)
获取当前音频文件的音轨索引
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
返回值 方法调用结果
注意
virtual void bytertc::IAudioMixingManager::SelectAudioTrack(
int mix_id,
int audio_track_index)
指定当前音频文件的播放音轨
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mix_id | int | 混音 ID |
| audio_track_index | int | 指定的播放音轨 设置的参数值需要小于或等于 GetAudioTrackCount 的返回值 |
注意
class bytertc::IEncryptHandler
加密/解密处理函数
| 返回 | 名称 |
|---|---|
| virtual unsigned int | OnEncryptData |
| virtual unsigned int | OnDecryptData |
virtual unsigned int bytertc::IEncryptHandler::OnEncryptData(
const unsigned char* data,
unsigned int length,
unsigned char* buf,
unsigned int buf_len)
自定义加密。
使用设定的自定义加密方式,对传输前的音视频帧数据进行加密。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| data | const unsigned char* | 原始音视频帧数据 |
| length | unsigned int | 原始音视频帧数据的长度 |
| buf | unsigned char* | 可供写入的加密后数据缓冲区 |
| buf_len | unsigned int | 可供写入的加密后数据缓冲区大小 |
返回值 加密后的数据
注意
virtual unsigned int bytertc::IEncryptHandler::OnDecryptData(
const unsigned char* data,
unsigned int length,
unsigned char* buf,
unsigned int buf_len)
自定义解密。
对自定义加密后的音视频帧数据进行解密。关于自定义加密,参看 OnEncryptData。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| data | const unsigned char* | 原始音视频帧数据 |
| length | unsigned int | 原始音视频帧数据的长度 |
| buf | unsigned char* | 可供写入的加密后数据缓冲区 |
| buf_len | unsigned int | 可供写入的加密后数据缓冲区大小 |
返回值 加密后的数据
注意
class bytertc::IDeviceCollection
音视频设备相关的信息
| 返回 | 名称 |
|---|---|
| virtual int | GetCount |
| virtual int | GetDevice |
| virtual void | Release |
virtual int bytertc::IDeviceCollection::GetCount()
获取当前系统内音视频设备数量
返回值 音视频设备数量
virtual int bytertc::IDeviceCollection::GetDevice(
int index,
char device_name[MAX_DEVICE_ID_LENGTH],
char device_id[MAX_DEVICE_ID_LENGTH])
根据索引号,获取设备信息
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| index | int | 设备索引号,从 0 开始,注意需小于 GetCount 返回值。 |
| device_name | char | 设备名称 |
| device_id | char | 设备 ID |
返回值
virtual void bytertc::IDeviceCollection::Release()
释放当前 IDeviceCollection 对象占用的资源。
注意 不需要返回音视频设备相关信息列表时应该调用本方法释放相关资源。
class bytertc::IVideoDeviceManager
主要用于枚举、设置视频采集设备
| 返回 | 名称 |
|---|---|
| virtual IDeviceCollection* | EnumerateVideoCaptureDevices |
| virtual int | SetVideoCaptureDevice |
| virtual int | GetVideoCaptureDevice |
virtual IDeviceCollection* bytertc::IVideoDeviceManager::EnumerateVideoCaptureDevices()
获取当前系统内视频采集设备列表。
返回值 包含系统中所有视频采集设备的列表,参看 IDeviceCollection。
virtual int bytertc::IVideoDeviceManager::SetVideoCaptureDevice(
const char device_id[MAX_DEVICE_ID_LENGTH])
设置当前视频采集设备
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| device_id | const char | 视频设备 ID,可以通过 EnumerateVideoCaptureDevices 获取 |
返回值
virtual int bytertc::IVideoDeviceManager::GetVideoCaptureDevice(
char device_id[MAX_DEVICE_ID_LENGTH])
获取当前 SDK 正在使用的视频采集设备信息
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| device_id | char | 视频设备 ID |
返回值
class bytertc::IAudioDeviceManager
音频设备管理类
| 返回 | 名称 |
|---|---|
| virtual IDeviceCollection* | EnumerateAudioPlaybackDevices |
| virtual IDeviceCollection* | EnumerateAudioCaptureDevices |
| virtual int | SetAudioPlaybackDevice |
| virtual int | SetAudioCaptureDevice |
| virtual int | SetAudioPlaybackDeviceVolume |
| virtual int | GetAudioPlaybackDeviceVolume |
| virtual int | SetAudioCaptureDeviceVolume |
| virtual int | GetAudioCaptureDeviceVolume |
| virtual int | SetAudioPlaybackDeviceMute |
| virtual int | GetAudioPlaybackDeviceMute |
| virtual int | SetAudioCaptureDeviceMute |
| virtual int | GetAudioCaptureDeviceMute |
| virtual int | GetAudioPlaybackDevice |
| virtual int | GetAudioCaptureDevice |
| virtual int | StartAudioPlaybackDeviceTest |
| virtual int | StopAudioPlaybackDeviceTest |
| virtual int | StartAudioCaptureDeviceTest |
| virtual int | StopAudioCaptureDeviceTest |
| virtual int | StartAudioDeviceLoopbackTest |
| virtual int | StopAudioDeviceLoopbackTest |
| virtual int | InitAudioPlaybackDeviceForTest |
| virtual int | InitAudioCaptureDeviceForTest |
virtual IDeviceCollection* bytertc::IAudioDeviceManager::EnumerateAudioPlaybackDevices()
获取当前系统内音频播放设备列表。如果后续设备有变更,你会收到 OnMediaDeviceStateChanged 回调通知,然后需要重新调用本接口以获得新的设备列表。
返回值 包含系统中所有音频播放设备的列表,参看 IDeviceCollection。
virtual IDeviceCollection* bytertc::IAudioDeviceManager::EnumerateAudioCaptureDevices()
获取当前系统内音频采集设备列表。如果后续设备有变更,你需要重新调用本接口以获得新的设备列表。
返回值 一个包含系统中所有音频采集设备列表的对象,详见 IDeviceCollection。
注意 当不再使用返回的对象时,你需要调用 Release 进行释放。
virtual int bytertc::IAudioDeviceManager::SetAudioPlaybackDevice(
const char device_id[MAX_DEVICE_ID_LENGTH])
设置音频播放设备。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| device_id | const char | 音频播放设备 ID,可通过 EnumerateAudioPlaybackDevices 获取。 |
返回值
virtual int bytertc::IAudioDeviceManager::SetAudioCaptureDevice(
const char device_id[MAX_DEVICE_ID_LENGTH])
设置音频采集设备。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| device_id | const char | 音频采集设备 ID,可通过 EnumerateAudioCaptureDevices 获取。 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::SetAudioPlaybackDeviceVolume(
unsigned int volume)
设置当前音频播放设备音量
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| volume | unsigned int | 音频播放设备音量,取值范围为 [0,255], 超出此范围设置无效。 • [0,25] 接近无声; • [25,75] 为低音量; • [76,204] 为中音量; • [205,255] 为高音量。 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::GetAudioPlaybackDeviceVolume(
unsigned int* volume)
获取当前音频播放设备音量
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| volume | unsigned int* | 音频播放设备音量,范围应在 [0,255] 内。 • [0,25] 接近无声; • [25,75] 为低音量; • [76,204] 为中音量; • [205,255] 为高音量。 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::SetAudioCaptureDeviceVolume(
unsigned int volume)
设置当前音频采集设备音量
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| volume | unsigned int | 音频采集设备音量,取值范围为 [0,255], 超出此范围设置无效。 • [0,25] 接近无声; • [25,75] 为低音量; • [76,204] 为中音量; • [205,255] 为高音量。 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::GetAudioCaptureDeviceVolume(
unsigned int* volume)
获取当前音频采集设备音量
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| volume | unsigned int* | 音频采集设备音量,范围应在 [0,255] 内。 • [0,25] 接近无声; • [25,75] 为低音量; • [76,204] 为中音量; • [205,255] 为高音量。 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::SetAudioPlaybackDeviceMute(
bool mute)
设置当前音频播放设备静音状态,默认为非静音。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mute | bool | • true:静音 • false:非静音 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::GetAudioPlaybackDeviceMute(
bool* mute)
获取当前音频播放设备是否静音的信息。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mute | bool* | • true:静音 • false:非静音 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::SetAudioCaptureDeviceMute(
bool mute)
设置当前音频采集设备静音状态,默认为非静音。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mute | bool | • true:静音 • false:非静音 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::GetAudioCaptureDeviceMute(
bool* mute)
获取当前音频采集设备是否静音的信息。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mute | bool* | • true:静音 • false:非静音 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::GetAudioPlaybackDevice(
char device_id[MAX_DEVICE_ID_LENGTH])
获取当前音频播放设备 ID。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| device_id | char | 音频播放设备 ID |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::GetAudioCaptureDevice(
char device_id[MAX_DEVICE_ID_LENGTH])
获取当前音频采集设备 ID。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| device_id | char | 音频采集设备 ID,使用方负责按 MAX_DEVICE_ID_LENGTH 大小,分配与释放内存 |
返回值 方法调用结果
virtual int bytertc::IAudioDeviceManager::StartAudioPlaybackDeviceTest(
const char* test_audio_file_path)
启动音频播放设备测试。
该方法测试播放设备是否能正常工作。SDK 播放指定的音频文件,测试者如果能听到声音,说明播放设备能正常工作。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| test_audio_file_path | const char* | 音频文件的绝对路径,路径字符串使用 UTF-8 编码格式,支持以下音频格式: mp3,aac,m4a,3gp,wav。 |
返回值 方法调用结果
注意
virtual int bytertc::IAudioDeviceManager::StopAudioPlaybackDeviceTest()
停止音频播放设备测试。
返回值 方法调用结果
注意 调用 StartAudioPlaybackDeviceTest 后,需调用本方法停止测试。
virtual int bytertc::IAudioDeviceManager::StartAudioCaptureDeviceTest(
int indication_interval)
启动音频采集设备测试。
该方法测试音频采集设备是否能正常工作。启动测试后,会收到 OnLocalAudioPropertiesReport 回调上报的音量信息。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| indication_interval | int | OnLocalAudioPropertiesReport 回调的时间间隔,单位为毫秒。建议设置到大于 200 毫秒。最小不得少于 10 毫秒。小于10 毫秒行为未定义。 |
返回值 方法调用结果
注意
virtual int bytertc::IAudioDeviceManager::StopAudioCaptureDeviceTest()
停止音频采集设备测试。
返回值 方法调用结果
注意 调用 StartAudioCaptureDeviceTest 后,需调用本方法停止测试。
virtual int bytertc::IAudioDeviceManager::StartAudioDeviceLoopbackTest(
int indication_interval)
开始音频设备回路测试。
该方法测试音频采集设备和音频播放设备是否能正常工作。一旦测试开始,音频采集设备会采集本地声音
并通过音频播放设备播放出来,同时用户 App 会收到 OnLocalAudioPropertiesReport
回调上报的音量信息。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| indication_interval | int | OnLocalAudioPropertiesReport 回调的时间间隔,单位为毫秒。建议设置到大于 200 毫秒。最小不得少于 10 毫秒。小于 10 毫秒行为未定义。 |
返回值 方法调用结果
注意
virtual int bytertc::IAudioDeviceManager::StopAudioDeviceLoopbackTest()
停止音频设备回路测试。
返回值 方法调用结果
注意 调用 StartAudioDeviceLoopbackTest 后,需调用本方法停止测试。
virtual int bytertc::IAudioDeviceManager::InitAudioPlaybackDeviceForTest(
const char deviceId[MAX_DEVICE_ID_LENGTH])
尝试初始化音频播放设备,可检测出设备不存在、权限被拒绝/禁用等异常问题。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| index | const char deviceId[MAX_DEVICE_ID_LENGTH] | 设备索引号 |
返回值 设备状态错误码
注意 1. 该接口需在进房前调用; 2. 检测成功不代表设备一定可以启动成功,还可能因设备被其他应用进程独占,或 CPU/内存不足等原因导致启动失败。
virtual int bytertc::IAudioDeviceManager::InitAudioCaptureDeviceForTest(
const char deviceId[MAX_DEVICE_ID_LENGTH])
尝试初始化音频采集设备,可检测设备不存在、权限被拒绝/禁用等异常问题。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| index | const char deviceId[MAX_DEVICE_ID_LENGTH] | 设备索引 |
返回值 设备状态错误码
注意 1. 该接口需在进房前调用; 2. 检测成功不代表设备一定可以启动成功,还可能因设备被其他应用进程独占,或 CPU/内存不足等原因导致启动失败。
class bytertc::IRtcEngine
引擎API IRtcEngine用IRtcEngineEventHandler 注册接口类方法向应用程序发送回调通知
| 返回 | 名称 |
|---|---|
| virtual int | JoinRoom |
virtual int bytertc::IRtcEngine::JoinRoom(
const char* token,
const char* room_id,
const UserInfo& user_info,
const RTCRoomConfig& room_config)
创建/加入房间:房间不存在时即创建房间;房间存在时即加入这个房间。
同一房间内的用户间可以相互通话。
进房后重复调用无效,用户必须调用 LeaveRoom 退出当前房间后,才能加入下一个房间。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| token | const char* | 动态密钥,用于对登录用户进行鉴权验证。 进入房间需要携带 Token。测试时可使用控制台生成临时 Token,正式上线需要使用密钥 SDK 在您的服务端生成并下发 Token。 请务必保证生成 Token 使用的 App ID 和创建引擎时使用的 App ID 相同,否则会导致加入房间失败。 |
| room_id | const char* | 加入的房间 ID。 该字符串符合正则表达式: [a-zA-Z0-9_@\-]{1,128} |
| user_info | const UserInfo& | 用户信息,参看 UserInfo。 |
| room_config | const RTCRoomConfig& | 房间参数配置,设置房间模式以及是否自动发布或订阅流。具体配置模式参看 RTCRoomConfig。 |
返回值
注意
class bytertc::IScreenCaptureSourceList
屏幕源类型信息列表
| 返回 | 名称 |
|---|---|
| virtual int32_t | GetCount |
| virtual ScreenCaptureSourceInfo | GetSourceInfo |
| virtual void | Release |
virtual int32_t bytertc::IScreenCaptureSourceList::GetCount()
获取列表大小
返回值 获取列表大小
virtual ScreenCaptureSourceInfo bytertc::IScreenCaptureSourceList::GetSourceInfo(
int32_t index)
根据索引,获取屏幕共享列表中的元素
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| index | int32_t | 列表索引号 |
返回值 屏幕源类型信息
注意 返回类型中有char*类型的字符串,该字符串在本对象Release后释放,请注意内存管理。
virtual void bytertc::IScreenCaptureSourceList::Release()
析构当前对象,释放内存
注意 严禁调用 delete 该结构体,该结构不需要的时候应该调用本函数释放资源
class bytertc::IRtcEngineLite
引擎 API
virtual void bytertc::IRtcEngineLite::SetEarMonitorMode(
EarMonitorMode mode)
开启/关闭耳返功能
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mode | EarMonitorMode | 是否开启耳返功能,参看 EarMonitorMode |
virtual void bytertc::IRtcEngineLite::SetEarMonitorVolume(
const int volume)
设置耳返的音量
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| volume | const int | 耳返的音量,取值范围:[0,100],单位:% |
注意
virtual int bytertc::IRtcEngineLite::SetVoiceChangerType(
VoiceChangerType voice_changer)
设置变声特效类型
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| voice_changer | VoiceChangerType | 变声特效类型,参看 VoiceChangerType |
注意
virtual int bytertc::IRtcEngineLite::SetVoiceReverbType(
VoiceReverbType voice_reverb)
设置混响特效类型
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| voice_reverb | VoiceReverbType | 混响特效类型,参看 VoiceReverbType |
注意
virtual void bytertc::IRtcEngineLite::SetAudioProfile(
AudioProfileType audio_profile)
设置音质档位。你应根据业务场景需要选择适合的音质档位。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| audio_profile | AudioProfileType | 音质档位,参看 AudioProfileType |
注意
virtual void bytertc::IRtcEngineLite::MuteLocalAudio(
MuteState mute_state)
控制本地音频流的发送状态:发送/不发送
非隐身用户使用此方法后,房间中的其他用户会收到回调: OnUserMuteAudio
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mute_state | MuteState | 发送状态,标识是否发送本地音频流,详见:MuteState |
注意
virtual void bytertc::IRtcEngineLite::EnableExternalAudioDevice(
const AudioFormat &recording_format,
const AudioFormat &playback_format)
启用自定义音频采集渲染
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| recording_format | const AudioFormat & | 自定义音频数据采集格式,详见 AudioFormat |
| playback_format | const AudioFormat & | 自定义音频数据渲染格式,详见 AudioFormat |
注意
virtual void bytertc::IRtcEngineLite::DisableExternalAudioDevice()
禁用自定义音频采集和渲染。
注意
virtual bool bytertc::IRtcEngineLite::PushExternalAudioFrame(
int8_t* data,
int samples)
推送自定义音频数据。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| data | int8_t* | pcm 数据。音频采样格式必须为 S16。音频缓冲区内的数据格式必须为 PCM,内存大小应该为 samples * record_format.channel * 2。 |
| samples | int | 采样点数量,应该为 EnableExternalAudioDevice 中设置的 record_format.sample_rate / 100。 例如,当设置采样率为 48000 时, 每次应该推送 480 个采样点。 |
返回值 方法调用结果
注意
virtual bool bytertc::IRtcEngineLite::PullExternalAudioFrame(
int8_t* data,
int samples)
拉取远端音频数据。使用 EnableExternalAudioDevice 启用自定义音频采集渲染后,可以使用本方法拉取远端音频数据。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| data | int8_t* | pcm 数据,内存大小应该为 samples |
| samples | int | 采样点数量,应该为 EnableExternalAudioDevice 中设置的 playback_format.sample_rate / 100。 当设置采样率为 48000 时, 每次应该拉取 480 个采样点 |
返回值 方法调用结果
注意
virtual int bytertc::IRtcEngineLite::SetVideoEncoderConfig(
StreamIndex index,
const VideoSolution* solutions,
int solution_num)
设置推送多路流时的各路视频参数,包括分辨率、帧率、码率、缩放模式、网络不佳时的回退策略等。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| index | StreamIndex | 视频流属性,参看 StreamIndex。 |
| solutions | const VideoSolution* | 要推送的多路视频流参数,参看 VideoSolution。 最大分辨率为 4096px |
| solution_num | int | 视频参数数组长度。 最多支持 4 路参数。当设置了多路参数时,分辨率必须是从大到小排列。 |
返回值
注意
virtual void bytertc::IRtcEngineLite::MuteLocalVideo(
MuteState muteState)
停止/启动发送本地视频流,默认不发送。
无论你使用内部视频采集,还是自定义视频采集,你都应使用此接口启动发送本地视频流。
调用该方法后,房间中的其他用户会收到 OnUserMuteVideo 的回调。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| muteState | MuteState | 发送状态,标识是否发送本地视频流,参看 MuteState |
注意
virtual bool bytertc::IRtcEngineLite::PushScreenFrame(
IVideoFrame* frame)
推送屏幕视频帧
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| frame | IVideoFrame* | 设置屏幕视频帧,详见:IVideoFrame。 |
返回值
注意
virtual int bytertc::IRtcEngineLite::StartScreenCaptureByDisplayId(
unsigned int display_id,
const Rectangle& region_rect,
const DesktopCaptureParameters& capture_params)
废弃
since 327.1, use StartScreenVideoCapture and PublishScreen instead
通过屏幕 id 共享屏幕,共享一个屏幕或该屏幕的部分区域。用户需要在该方法中指定想要共享的屏幕 id 。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| display_id | unsigned int | 指定待共享的屏幕 id 。 |
| region_rect | const Rectangle& | 指定待共享区域相对于整个屏幕的位置,详见:Rectangle |
| capture_params | const DesktopCaptureParameters& | 屏幕共享的编码参数配置,详见:DesktopCaptureParameters |
返回值
注意 共享一个窗口或该窗口的部分区域。需要在该方法中指定想要共享的窗口 id 。
virtual int bytertc::IRtcEngineLite::StartScreenCapture(
void* context,
const char* group_id,
const DesktopCaptureParameters& capture_params)
废弃
since 327.1, use StartScreenVideoCapture and PublishScreen instead
通过传入的Context开启屏幕共享。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| context | void* | Android平台是MediaProjection对象,由业务方申请系统录屏权限后获得, iOS上暂未用到,传空即可。 |
| group_id | const char* | iOS 平台需传入 App 和 Extension 共同使用的 group id,Android平台传空即可。 |
| capture_params | const DesktopCaptureParameters& | 屏幕共享的编码参数配置,详见:DesktopCaptureParameters |
返回值
注意 开启屏幕共享,移动端专用接口。
virtual void bytertc::IRtcEngineLite::StopScreenCapture()
废弃
since 327.1, use StopScreenVideoCapture instead
停止屏幕或者窗口共享。
注意
virtual void bytertc::IRtcEngineLite::SetVideoSourceType(
StreamIndex stream_index,
VideoSourceType type)
设置向 SDK 输入的视频源
默认使用内部采集。内部采集指:使用 RTC SDK 内置的视频采集机制进行视频采集。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| stream_index | StreamIndex | 视频流的属性,参看 StreamIndex |
| type | VideoSourceType | 视频输入源类型,参看 VideoSourceType |
注意
virtual bool bytertc::IRtcEngineLite::PushExternalVideoFrame(
IVideoFrame* frame)
发送外部源视频数据
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| frame | IVideoFrame* | 设置视频帧,参看 IVideoFrame。 |
注意 推送外部视频帧前,必须调用 SetVideoSourceType 开启外部视频源采集。
virtual int bytertc::IRtcEngineLite::SetAudioPlaybackDevice(
AudioPlaybackDevice device)
设置音频播放设备,默认使用扬声器。
音频播放设备发生变化时,会收到 OnAudioPlaybackDeviceChanged 回调。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| device | AudioPlaybackDevice | 音频播放设备。参看 AudioPlaybackDevice |
返回值 方法调用结果
注意
3. 若连接有线或者蓝牙音频播放设备时,将音频播放设备设置为扬声器或听筒将调用成功,但不会立马切换到扬声器或听筒,会在有线或者蓝牙音频播放设备移除后,根据设置自动切换到听筒或者扬声器。
virtual IRtcRoom* bytertc::IRtcEngineLite::CreateRtcRoom(
const char* room_id)
创建房间
多次调用此方法以创建多个 IRTCRoom 实例。分别调用各 IRTCRoom 实例中的 JoinRoom 方法,同时加入多个房间。多房间模式下,用户可以同时订阅各房间的音视频流。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| room_id | const char* | 标识通话房间的房间 ID,最大长度为 128 字节的非空字符串。支持的字符集范围为: • 26个大写字母 A ~ Z • 26个小写字母 a ~ z • 10个数字 0 ~ 9 • 下划线 "_", at 符 "@", 减号 "-" 多房间模式下,调用创建房间接口后,请勿调用同样的 roomID 创建房间,否则会导致创建房间失败。 |
返回值
IRtcRoom 实例
注意 如果你需要在多个房间发布音视频流,无须创建多房间,直接调用 startForwardStreamToRooms。
virtual int bytertc::IRtcEngineLite::SetPublishFallbackOption(
PublishFallbackOption option)
设置发布的音视频流回退选项
你可以调用这个接口来设置网络情况不佳或设备性能不足时只发送小流,以保证通话质量。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| option | PublishFallbackOption | 本地发布的音视频流回退选项 • 0:(默认)上行网络较弱或性能不佳时,不对音视频流作回退处理。 • 1:上行网络较弱或性能不佳时,只发送视频小流。 |
返回值
注意
virtual int bytertc::IRtcEngineLite::SetSubscribeFallbackOption(
SubscribeFallbackOption option)
设置订阅的音视频流回退选项
你可以通过调用该接口来设置网络情况不佳或性能不足时只订阅小流或音频流,以保证通话流畅。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| option | SubscribeFallbackOption | 远端订阅流回退处理选项,详见枚举类型 SubscribeFallbackOption |
返回值 0: 方法调用成功
注意
virtual int bytertc::IRtcEngineLite::SetRemoteUserPriority(
const char* user_id,
RemoteUserPriority priority)
设置用户优先级
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| user_id | const char* | 远端用户的 ID |
| priority | RemoteUserPriority | 远端用户的需求优先级,详见枚举类型RemoteUserPriority |
返回值 0: 方法调用成功
注意
virtual int bytertc::IRtcEngineLite::SetBusinessId(
const char* business_id)
设置业务标识参数
可通过 businessId 区分不同的业务场景。businessId 由客户自定义,相当于一个“标签”,可以分担和细化现在 AppId 的逻辑划分的功能,但不需要鉴权。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| business_id | const char* | 用户设置的自己的 businessId 值 businessId 只是一个标签,颗粒度需要用户自定义。 |
返回值
注意
virtual void bytertc::IRtcEngineLite::SetLocalVideoMirrorMode(
MirrorMode mirrorMode)
废弃
since 329.1, use SetLocalVideoMirrorType instead
设置采用前置摄像头采集时,是否开启镜像模式。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mirrorMode | MirrorMode | 是否开启镜像模式 |
virtual void bytertc::IRtcEngineLite::SetLocalVideoMirrorType(
MirrorType mirrorType)
为采集到的视频流开启镜像
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mirrorType | MirrorType | 镜像类型,参看 MirrorType |
注意
| 前置摄像头 | 后置摄像头 | 自定义采集视频源 | 桌面端摄像头 | |
|---|---|---|---|---|
| 移动端 | 本地预览镜像,编码传输不镜像 | 本地预览不镜像,编码传输不镜像 | 本地预览不镜像,编码传输不镜像 | / |
| 桌面端 | / | / | 本地预览不镜像,编码传输不镜像 | 本地预览镜像,编码传输不镜像 |
virtual void bytertc::IRtcEngineLite::SetEncryptInfo(
EncryptType encrypt_type,
const char* key,
int key_size)
设置传输时使用内置加密的方式
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| encrypt_type | EncryptType | 加密类型,详见 EncryptType |
| key | const char* | 加密密钥,长度限制为 36 位,超出部分将会被截断 |
| key_size | int | 参数 key 的长度 |
注意
virtual void bytertc::IRtcEngineLite::SetCustomizeEncryptHandler(
IEncryptHandler* handler)
设置自定义加密
需要实现对应的加密/解密方法,详情参考 EncryptType 。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| handler | IEncryptHandler* | 自定义加密 handler,需要实现 handler 的加密和解密方法 |
注意
该方法与 SetEncryptInfo 为互斥关系, 只能选择自定义加密方式或者默认加密方式。最终生效的加密方式取决于最后一个调用的方法。
该方法必须在进房之前调用,可重复调用,以最后调用的参数作为生效参数。
+ 数据加密/解密为串行执行,因而视实现方式不同,可能会影响到最终渲染效率。是否使用该方法,需要由使用方谨慎评估。
virtual void bytertc::IRtcEngineLite::RegisterAudioFrameObserver(
IAudioFrameObserver* observer)
注册音频数据回调观察者。
成功注册后,IAudioFrameObserver 会触发相关回调。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| observer | IAudioFrameObserver* | 音频数据观察者,详见:IAudioFrameObserver 。如果传入 null,则取消注册。 |
注意 通过以下的三个 API,你可以对回调的音频数据进行相关设置:SetRecordingAudioFrameParameters、 SetPlaybackAudioFrameParameters、 SetMixedAudioFrameParameters
virtual void bytertc::IRtcEngineLite::RegisterLocalAudioProcessor(
IAudioProcessor* processor,
AudioFormat audioFormat)
设置自定义音频处理器。
使用该处理器,你可以调用 ProcessAudioFrame 对 RTC SDK 采集得到的音频帧进行自定义处理,并将处理后的音频帧用于 RTC 音视频通信。
SDK 只持有 processor 的弱引用,你应保证其生命周期。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| processor | IAudioProcessor* | 自定义音频处理器,参看 IAudioProcessor。如果传入 null,则不对 RTC SDK 采集得到的音频帧进行自定义处理。 |
| audioFormat | AudioFormat | 自定义音频参数格式,参看 AudioFormat,SDK 将按指定设置给出音频帧。 |
注意 重复调用此接口时,仅最后一次调用生效。效果不会叠加。
virtual void bytertc::IRtcEngineLite::RegisterVideoFrameObserver(
IVideoFrameObserver* observer)
注册视频数据回调观察者
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| observer | IVideoFrameObserver* | 数据回调函数,详见 IVideoFrameObserver,将参数设置为 nullptr 则取消注册。 |
注意 该方法可以在任意时间调用,建议在 JoinRoom 前。
virtual int bytertc::IRtcEngineLite::RegisterLocalVideoProcessor(
IVideoProcessor* processor,
VideoPreprocessorConfig config)
设置自定义视频前处理器。
使用这个视频前处理器,你可以调用 ProcessVideoFrame 对 RTC SDK 采集得到的视频帧进行前处理,并将处理后的视频帧用于 RTC 音视频通信。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| processor | IVideoProcessor* | 自定义视频处理器,详见 IVideoProcessor。如果传入 null,则不对 RTC SDK 采集得到的视频帧进行前处理。 SDK 只持有 processor 的弱引用,你应保证其生命周期。 |
| config | VideoPreprocessorConfig | 自定义视频前处理器适用的设置,详见 VideoPreprocessorConfig。 当前, config 中的 required_pixel_format 仅支持:kVideoPixelFormatI420 和 kVideoPixelFormatUnknown:• 设置为 kVideoPixelFormatUnknown 时,RTC SDK 给出供 processor 处理的视频帧格式即采集的格式。你可以通过 frame_type 和 pixel_format 获取实际采集的视频帧格式和像素类型。 • 设置为 kVideoPixelFormatI420 时,RTC SDK 会将采集得到的视频帧转变为对应的格式,供前处理使用。• 设置为其他值时,此方法调用失败。 |
返回值
注意
kVideoPixelFormatI420 config 中的 required_pixel_format 设置为 kVideoPixelFormatI420,可以通过避免格式转换带来一些性能优化。
virtual int bytertc::IRtcEngineLite::SendSEIMessage(
StreamIndex stream_index,
const uint8_t* message,
int length,
int repeat_count)
在视频通信时,通过视频帧发送 SEI 数据。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| stream_index | StreamIndex | 媒体流类型,参看 StreamIndex |
| message | const uint8_t* | SEI 消息。长度不超过 4 kB。 |
| length | int | SEI 消息长度。 |
| repeat_count | int | 消息发送重复次数。取值范围是 [0, 30]。 调用此接口后,SEI 数据会添加到当前视频帧开始的连续 repeatCount 个视频帧中。 |
返回值
注意
virtual IPositionAudioRenderInterface* bytertc::IRtcEngineLite::GetPositionAudioRender()
获取位置音频接口实例,包括范围语音、空间语音等和位置相关的音频接口。
返回值 位置音频管理接口实例。如果返回 NULL,则表示不支持空间音频,详见 IPositionAudioRenderInterface 。
注意
virtual int bytertc::IRtcEngineLite::StartFileRecording(
StreamIndex type,
RecordingConfig config)
该方法将通话过程中的音视频数据录制到本地的文件中。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| type | StreamIndex | 流属性,指定录制主流还是屏幕流,参看 StreamIndex |
| config | RecordingConfig | 本地录制参数配置,参看 RecordingConfig |
返回值
注意
virtual void bytertc::IRtcEngineLite::StopFileRecording(
StreamIndex type)
停止本地录制
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| type | StreamIndex | 流属性,指定停止主流或者屏幕流录制,参看 StreamIndex |
注意
virtual void bytertc::IRtcEngineLite::SetRuntimeParameters(
const char * json_string)
设置运行时的参数
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| json_string | const char* | json 序列化之后的字符串 |
virtual void bytertc::IRtcEngineLite::StartASR(
const RTCASRConfig& asr_config,
IRTCASREngineEventHandler* handler)
开启自动语音识别服务。该方法将识别后的用户语音转化成文字,并通过 OnMessage 事件回调给用户。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| asr_config | const RTCASRConfig& | 校验信息,参看 RTCASRConfig |
| handler | IRTCASREngineEventHandler* | 语音识别服务使用状态回调,参看 IRTCASREngineEventHandler |
virtual void bytertc::IRtcEngineLite::StopASR()
关闭语音识别服务
virtual int bytertc::IRtcEngineLite::Feedback(
const char* data)
本次通话质量打分评价
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| data | const char* | 上报的数据。JSON 格式,必须包含以下 4 个字段: • types: 预设的问题类型集合,可多选。具体的类型参考 ProblemFeedbackOption • problem_desc: 预设问题以外的其他问题的具体描述 • os_version: 系统版本 • network_type: 网络类型:包括 WiFi, 2g, 3g, 4g, 5g。如果是台式机,填写 pc 。 |
返回值
注意 如果用户上报时在房间内,那么问题会定位到用户当前所在的一个或多个房间;如果用户上报时不在房间内,那么问题会定位到引擎此前退出的房间。
virtual IAudioMixingManager* bytertc::IRtcEngineLite::GetAudioMixingManager()
混音管理接口创建
返回值 混音管理实例,详见IAudioMixingManager
virtual void bytertc::IRtcEngineLite::Login(
const char* token,
const char* uid)
必须先登录注册一个 uid,才能发送房间外消息和向业务服务器发送消息
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| token | const char* | 动态密钥 用户登录必须携带的 Token,用于鉴权验证。 本 Token 与加入房间时必须携带的 Token 不同。测试时可使用控制台生成临时 Token,正式上线需要使用密钥 SDK 在你的服务端生成并下发 Token。 |
| uid | const char* | 用户 ID 用户 ID 在 appid 的维度下是唯一的。 |
注意
virtual void bytertc::IRtcEngineLite::Logout()
调用本接口登出后,无法调用房间外消息以及端到服务器消息相关的方法或收到相关回调。
注意
virtual void bytertc::IRtcEngineLite::UpdateLoginToken(
const char* token)
更新用户用于登录的 Token
Token 有一定的有效期,当 Token 过期时,需调用此方法更新登录的 Token 信息。
调用 Login 方法登录时,如果使用了过期的 Token 将导致登录失败,并会收到 OnLoginResult 回调通知,错误码为 kLoginErrorCodeInvalidToken。此时需要重新获取 Token,并调用此方法更新 Token。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| token | const char* | 更新的动态密钥 |
注意
virtual void bytertc::IRtcEngineLite::SetServerParams(
const char* signature,
const char* url)
设置业务服务器参数
客户端调用 SendServerMessage 或 SendServerBinaryMessage 发送消息给业务服务器之前,必须设置有效签名和业务服务器地址。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| signature | const char* | 动态签名 业务服务器会使用该签名对请求进行鉴权验证。 |
| url | const char* | 业务服务器的地址 |
注意
virtual void bytertc::IRtcEngineLite::GetPeerOnlineStatus(
const char* peer_user_id)
查询对端用户或本端用户的登录状态
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| peer_user_id | const char* | 需要查询的用户 ID |
注意
virtual int64_t bytertc::IRtcEngineLite::SendUserMessageOutsideRoom(
const char* uid,
const char* message)
给房间外指定的用户发送文本消息(P2P)
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| uid | const char* | 消息接收用户的 ID |
| message | const char* | 发送的文本消息内容 消息不超过 62KB。 |
返回值
注意
virtual int64_t bytertc::IRtcEngineLite::SendUserBinaryMessageOutsideRoom(
const char* uid,
int length,
const uint8_t* message)
给房间外指定的用户发送二进制消息(P2P)
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| uid | const char* | 消息接收用户的 ID |
| length | int | 二进制字符串的长度 |
| message | const uint8_t* | 发送的二进制消息内容 消息不超过 46KB。 |
返回值
注意
virtual int64_t bytertc::IRtcEngineLite::SendServerMessage(
const char* message)
客户端给业务服务器发送文本消息(P2Server)
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| message | const char* | 发送的文本消息内容 消息不超过 62KB。 |
返回值
注意
virtual int64_t bytertc::IRtcEngineLite::SendServerBinaryMessage(
int length,
const uint8_t* message)
客户端给业务服务器发送二进制消息(P2Server)
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| length | int | 二进制字符串的长度 |
| message | const uint8_t* | 发送的二进制消息内容 消息不超过 46KB。 |
返回值
注意
virtual NetworkDetectionStartReturn bytertc::IRtcEngineLite::StartNetworkDetection(
bool is_test_uplink,
int expected_uplink_bitrate,
bool is_test_downlink,
int expected_downlink_biterate)
开启通话前网络探测
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| is_test_uplink | bool | 是否探测上行带宽 |
| expected_uplink_bitrate | int | 期望上行带宽,单位:kbps范围为 {0, [100-10000]},其中, 0 表示由 SDK 指定最高码率。 |
| is_test_downlink | bool | 是否探测下行带宽 |
| expected_downlink_biterate | int | 期望下行带宽,单位:kbps范围为 {0, [100-10000]},其中, 0 表示由 SDK 指定最高码率。 |
返回值 开启通话前网络探测结果,详见 NetworkDetectionStartReturn
注意
virtual void bytertc::IRtcEngineLite::StopNetworkDetection()
停止通话前网络探测
注意
virtual void bytertc::IRtcEngineLite::SetScreenAudioSourceType(
AudioSourceType source_type)
在屏幕共享时,设置屏幕音频的采集方式(内部采集/自定义采集)
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| source_type | AudioSourceType | 屏幕音频输入源类型, 参看 AudioSourceType |
注意
kWarningCodeSetScreenAudioSourceTypeFailed
virtual void bytertc::IRtcEngineLite::SetScreenAudioStreamIndex(
StreamIndex index)
在屏幕共享时,设置屏幕音频流和麦克风采集到的音频流的混流方式
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| index | StreamIndex | 混流方式,参看 StreamIndex • kStreamIndexMain: 将屏幕音频流和麦克风采集到的音频流混流 • kStreamIndexScreen: 将屏幕音频流和麦克风采集到的音频流分为两路音频流 |
注意
你应该在 PublishScreen 之前,调用此方法。否则,你将收到 OnWarning 的报错:kWarningCodeSetScreenAudioStreamIndexFailed
virtual int bytertc::IRtcEngineLite::PushScreenAudioFrame(
IAudioFrame* frame)
使用自定义采集方式,采集屏幕共享时的屏幕音频时,将音频帧推送至 RTC SDK 处进行编码等处理。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| frame | IAudioFrame* | 音频数据帧,参见 IAudioFrame |
返回值 方法调用结果
注意
virtual void bytertc::IRtcEngineLite::EnableAudioPropertiesReport(
const AudioPropertiesConfig& config)
启用音频信息提示。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| config | const AudioPropertiesConfig& | 详见 AudioPropertiesConfig |
注意 开启提示后,你可以: + 通过 OnLocalAudioPropertiesReport 回调获取本地麦克风和屏幕音频流采集的音频信息;
virtual void bytertc::IRtcEngineLite::EnableVocalInstrumentBalance(
bool enable)
开启/关闭音量均衡功能。
开启音量均衡功能后,人声的响度会调整为 -16lufs。如果已调用 SetAudioMixingLoudness 传入了混音音乐的原始响度,此音乐播放时,响度会调整为 -20lufs。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| enable | bool | 是否开启音量均衡功能: • True: 是 • False: 否 |
注意 该接口须在调用 StartAudioMixing 开始播放音频文件之前调用。
virtual void bytertc::IRtcEngineLite::EnablePlaybackDucking(
bool enable)
打开/关闭音量闪避功能,适用于“一起看”等场景。
开启该功能后,当检测到远端人声时,本地的媒体播放音量会自动减弱,从而保证远端人声的清晰可辨;当远端人声消失时,本地媒体音量会恢复到闪避前的音量水平。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| enable | bool | 是否开启音量闪避: • True: 是 • False: 否 |
virtual void bytertc::IRtcEngineLite::RegisterLocalEncodedVideoFrameObserver(
ILocalEncodedVideoFrameObserver* observer)
注册本地视频帧监测器。
无论使用内部采集还是自定义采集,调用该方法后,SDK 每监测到一帧本地视频帧时,都会将视频帧信息通过 OnLocalEncodedVideoFrame 回调给用户
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| observer | ILocalEncodedVideoFrameObserver* | 本地视频帧监测器,参看 ILocalEncodedVideoFrameObserver。将参数设置为 nullptr 则取消注册。 |
注意 该方法可在进房前后的任意时间调用,在进房前调用可保证尽可能早地监测视频帧并触发回调
virtual void bytertc::IRtcEngineLite::RegisterRemoteEncodedVideoFrameObserver(
IRemoteEncodedVideoFrameObserver* observer)
注册远端编码后视频数据回調。
完成注册后,当 SDK 监测到远端编码后视频帧时,会触发 OnRemoteEncodedVideoFrame 回调
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| observer | IRemoteEncodedVideoFrameObserver* | 远端编码后视频数据监测器,参看 IRemoteEncodedVideoFrameObserver |
注意
virtual void bytertc::IRtcEngineLite::SetExternalVideoEncoderEventHandler(
IExternalVideoEncoderEventHandler* encoder_handler)
注册自定义编码帧推送事件回调
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| encoder_handler | IExternalVideoEncoderEventHandler* | 自定义编码帧回调类,参看 IExternalVideoEncoderEventHandler |
注意
virtual bool bytertc::IRtcEngineLite::PushExternalEncodedVideoFrame(
StreamIndex index,
int video_index,
IEncodedVideoFrame* video_stream)
推送自定义编码后的视频流
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| index | StreamIndex | 需要推送的编码流的属性,参看 StreamIndex |
| video_index | int | 对应的编码流下标,从 0 开始,如果调用 SetVideoEncoderConfig 设置了多路流,此处数量须与之保持一致 |
| video_stream | IEncodedVideoFrame* | 编码流视频帧信息,参看 IEncodedVideoFrame。 |
注意
virtual void bytertc::IRtcEngineLite::SetVideoDecoderConfig(
RemoteStreamKey key,
VideoDecoderConfig config)
在订阅远端视频流之前,设置远端视频数据解码方式
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| key | RemoteStreamKey | 远端流信息,即对哪一路视频流进行解码方式设置,参看 RemoteStreamKey。 |
| config | VideoDecoderConfig | 视频解码方式,参看 VideoDecoderConfig。 |
注意
virtual void bytertc::IRtcEngineLite::RequestRemoteVideoKeyFrame(
const RemoteStreamKey& stream_info)
在订阅远端视频流之后,向远端请求关键帧
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| stream_info | const RemoteStreamKey& | 远端流信息,参看 RemoteStreamKey。 |
注意
virtual int bytertc::IRtcEngineLite::SendStreamSyncInfo(
const uint8_t* data,
int32_t length,
const StreamSycnInfoConfig& config)
发送音频流同步信息。将消息通过音频流发送到远端,并实现与音频流同步,该接口调用成功后,远端用户会收到 OnStreamSyncInfoReceived 回调。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| data | const uint8_t* | 消息内容。 |
| length | int32_t | 消息长度。消息长度必须是 [1,16] 字节。 |
| config | const StreamSycnInfoConfig& | 媒体流信息同步的相关配置,详见 StreamSycnInfoConfig 。 |
返回值
virtual void bytertc::IRtcEngineLite::SetLocalVoicePitch(
int pitch)
开启本地语音变调功能,多用于 K 歌场景。
使用该方法,你可以对本地语音的音调进行升调或降调等调整。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| pitch | int | 相对于语音原始音调的升高/降低值,取值范围[-12,12],默认值为 0,即不做调整。 取值范围内每相邻两个值的音高距离相差半音,正值表示升调,负值表示降调,设置的绝对值越大表示音调升高或降低越多。 超出取值范围则设置失败,并且会触发 OnWarning 回调,提示 WarningCode 错误码为 WARNING_CODE_SET_SCREEN_STREAM_INVALID_VOICE_PITCH 设置语音音调不合法 |
virtual void bytertc::IRtcEngineLite::MuteAudioPlayback(
MuteState mute_state)
控制本地音频流播放状态:播放/不播放
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| mute_state | MuteState | 播放状态,标识是否播放本地音频流,详见:MuteState |
注意 本方法仅控制本地收到音频流的播放状态,并不影响本地音频播放设备。
class bytertc::IPositionAudioRenderInterface
空间音频接口
| 返回 | 名称 |
|---|---|
| virtual void | EnableAudioSpatialRender |
| virtual int | UpdatePosition |
| virtual int | UpdateSelfOrientation |
| virtual void | RegisterRemoteInfoObserver |
virtual void bytertc::IPositionAudioRenderInterface::EnableAudioSpatialRender(
bool enable)
开启或关闭空间音频效果。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| enable | bool | 空间音频效果开关,默认关闭。 • true: 开启空间音频效果; • false: 关闭空间音频效果。 |
virtual int bytertc::IPositionAudioRenderInterface::UpdatePosition(
const Position& pos)
更新自己的位置坐标。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| pos | const Position& | 三维坐标的值,默认为 [0, 0, 0]。根据需要,自行建立空间直角坐标系,并将需要使用空间音频功能的用户,都置于同一坐标系下。 |
返回值
virtual int bytertc::IPositionAudioRenderInterface::UpdateSelfOrientation(
const HumanOrientation& orientation)
更新自己的朝向。本地朝向的设置只影响本地听到的音频效果,不影响本地发出的音频效果。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| orientation | const HumanOrientation& | 朝向信息,必须是单位向量。参看 HumanOrientation。当朝向的正方向使用默认值时,朝向的坐标系和位置信息使用的坐标系一致。此时,正前方朝向是:[1, 0, 0],正右方朝向是:[0, 1, 0],正上方朝向是:[0, 0, 1]。 |
返回值 0: 朝向更新成功。
注意 本地用户调用 EnableAudioSpatialRender 使用空间音频功能时,需要调用 UpdatePosition 接口更新位置坐标后,才能调用此接口。
virtual void bytertc::IPositionAudioRenderInterface::RegisterRemoteInfoObserver(
IRemotePositionInfoObserver* observer)
注册远端用户位置信息回调
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| observer | IRemotePositionInfoObserver* | 用户位置信息观察者。详见 IRemotePositionInfoObserver 。如果传入 null,则取消注册。 |
注意 只有在远端用户调用 EnableAudioSpatialRender 使用空间音频效果时,调用 UpdatePosition 更新位置坐标,本地用户才可以通过本接口注册的回调获取远端用户的位置信息。
class bytertc::ITranscoderParam
| 返回 | 名称 |
|---|---|
| virtual const char* | RoomID |
| virtual const char* | UserID |
| virtual StreamMixingType | ExpectedMixingType |
| virtual const char* | Uri |
| virtual const char* | JsonContent |
| virtual Transcoder | AudioParam |
| virtual Transcoder | VideoParam |
| virtual int32_t | LayoutRegionsSize |
| virtual TranscoderLayoutRegion | LayoutRegionByIndex |
| virtual const char* | BackgroundColor |
| virtual const char* | AppData |
| virtual void | SetRoomID |
| virtual void | SetUserID |
| virtual void | SetExpectedMixingType |
| virtual void | SetUri |
| virtual void | SetJsonContent |
| virtual void | SetAudioParam |
| virtual void | SetVideoParam |
| virtual void | SetLayoutParam |
| virtual const char* | Flatten |
| virtual ITranscoderParam* | Inflatten |
virtual const char* bytertc::ITranscoderParam::RoomID()
获取合流房间 ID
返回值 合流房间 ID
virtual const char* bytertc::ITranscoderParam::UserID()
获取合流用户 ID
返回值 合流用户 ID
virtual StreamMixingType bytertc::ITranscoderParam::ExpectedMixingType()
获取合流类型
返回值 合流类型,参看 StreamMixingType
virtual const char* bytertc::ITranscoderParam::Uri()
获取推流地址
返回值 推流地址
virtual const char* bytertc::ITranscoderParam::JsonContent()
获取通过 Flatten 方法转换得到的 json 格式内容
返回值 json 格式数据
virtual TranscoderAudioParam bytertc::ITranscoderParam::AudioParam()
获取合流音频参数
返回值 合流音频参数内容,参看 TranscoderAudioParam
virtual TranscoderVideoParam bytertc::ITranscoderParam::VideoParam()
获取合流视频参数
返回值 合流视频参数内容,参看 TranscoderVideoParam
virtual int32_t bytertc::ITranscoderParam::LayoutRegionsSize()
获取合流参数中视窗的数量
返回值 合流参数中视窗的数量
virtual TranscoderLayoutRegion bytertc::ITranscoderParam::LayoutRegionByIndex(
int32_t index)
获取合流视窗布局信息
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| index | int32_t | 视窗对应下标 |
返回值 合流视窗布局信息,参看 TranscoderLayoutRegion
virtual const char* bytertc::ITranscoderParam::BackgroundColor()
获取背景颜色
返回值 背景颜色
virtual const char* bytertc::ITranscoderParam::AppData()
获取 SEI 信息
返回值 SEI 信息
virtual void bytertc::ITranscoderParam::SetRoomID(
const char* room_id)
设置合流房间 ID
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| room_id | const char* | 发起合流的用户所在的房间 ID |
virtual void bytertc::ITranscoderParam::SetUserID(
const char* user_id)
设置合流用户 ID
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| user_id | const char* | 发起合流的用户的 ID |
virtual void bytertc::ITranscoderParam::SetExpectedMixingType(
StreamMixingType expected_mix_type)
设置合流类型
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| expected_mix_type | StreamMixingType | 合流类型,参看 StreamMixingType |
virtual void bytertc::ITranscoderParam::SetUri(
const char* uri)
设置推流地址
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| uri | const char* | 推流地址 |
virtual void bytertc::ITranscoderParam::SetJsonContent(
const char* json_content)
设置 jsonContent
传入通过 Flatten 方法转换得到的 json 格式内容
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| json_content | const char* | json 格式内容 |
virtual void bytertc::ITranscoderParam::SetAudioParam(
const TranscoderAudioParam&)
设置音频参数
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| TranscoderAudioParam | const | 音频参数,参看 TranscoderAudioParam |
virtual void bytertc::ITranscoderParam::SetVideoParam(
const TranscoderVideoParam&)
设置视频参数
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| TranscoderVideoParam | const | 视频参数,参看 TranscoderVideoParam |
virtual void bytertc::ITranscoderParam::SetLayoutParam(
TranscoderLayoutRegion regions[],
int32_t regions_size,
const char* bg_color,
const char* app_data)
设置合流布局参数
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| regions[] | TranscoderLayoutRegion | 合流布局参数,参看 TranscoderLayoutRegion |
| regions_size | int32_t | 合流视窗数量 |
| bg_color | const char* | 合流背景颜色 |
| app_data | const char* | 用户额外需要传入的数据 |
virtual const char* bytertc::ITranscoderParam::Flatten(
const char* contentType,
const char* action)
将合流参数转成 json 字符串
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| contentType | const char* | 内容属性,表明是合流信令 |
| action | const char* | 合流状态,可选取值如下: • started: 开启合流 • layoutChanged: 更新合流布局 • stopped: 停止合流 |
返回值 转换后的 json 字符串
virtual ITranscoderParam* bytertc::ITranscoderParam::Inflatten(
const char* json_str)
将输入的 json 格式的字符串转成 ITranscoderParam 结构体
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| json_str | const char* | json 格式字符串 |
返回值 转换后的 ITranscoderParam 结构体
class bytertc::IVideoEffect
视频特效接口
| 返回 | 名称 |
|---|---|
| virtual int | CheckLicense |
| virtual int | GetAuthMessage |
| virtual int | FreeAuthMessage |
| virtual int | EnableEffect |
| virtual void | SetAlgoModelPath |
| virtual int | SetEffectNodes |
| virtual int | UpdateNode |
| virtual int | SetColorFilter |
| virtual int | SetColorFilterIntensity |
| virtual int | InitVirtualBackground |
| virtual int | EnableVirtualBackground |
| virtual int | DisableVirtualBackground |
virtual int bytertc::IVideoEffect::CheckLicense(
void* androidContext,
void* jnienv,
const char* licensePath)
视频特效许可证检查
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| androidContext | void* | Android Context 对象指针(jobject 类型)。Android 以外平台传入 nullptr |
| jnienv | void* | Android JNIEnv 指针。Android 以外平台传入 nullptr |
| licensePath | const char* | 许可证文件绝对路径 |
返回值
注意 开始使用视频特效前,你必须先调用这个方法进行许可证验证
virtual int bytertc::IVideoEffect::GetAuthMessage(
char ** ppmsg,
int * len)
从 CV SDK 获取授权消息,用于获取在线许可证。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| ppmsg | char** | 授权消息字符串地址 |
| len | int* | 授权消息字符串的长度 |
返回值
注意
使用 CV 的功能前,你必须获取 CV SDK 的在线许可证。
通过此接口获取授权消息后,你必须参考 在线授权说明。
自行实现获取在线许可证的业务逻辑。获取许可证后,你必须调用 CheckLicense 确认许可证有效。然后,你才可以使用 CV 功能。
获取授权消息后,调用 FreeAuthMessage 释放内存。
virtual int bytertc::IVideoEffect::FreeAuthMessage(
char * pmsg)
使用完授权消息字符串后,释放内存。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| pmsg | char* | GetAuthMessage 返回的授权消息字符串。 |
返回值
virtual int bytertc::IVideoEffect::EnableEffect(
bool enabled)
开启关闭视频特效
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| enabled | bool | 是否开启特效,true: 开启,false: 关闭 |
返回值
注意 在调用CheckLicense和SetAlgoModelPath后调用此方法
virtual void bytertc::IVideoEffect::SetAlgoModelPath(
const char* modelPath)
设置视频特效算法模型路径
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| modelPath | const char* | 模型路径 |
virtual int bytertc::IVideoEffect::SetEffectNodes(
const char** effectNodePaths,
int nodeNum)
设置视频特效素材包
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| effectNodePaths | const char** | 特效素材包路径数组 要取消当前视频特效,将此参数设置为 null。 |
| nodeNum | int | 特效素材包个数 |
返回值
virtual int bytertc::IVideoEffect::UpdateNode(
const char* nodePath,
const char* nodeKey,
float nodeValue)
设置特效强度
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| nodePath | const char* | 特效素材包路径 |
| nodeKey | const char* | 需要设置的素材 key 名称,取值请参考 素材 key 对应说明。 |
| nodeValue | float | 需要设置的强度值 取值范围 [0,1],超出范围时设置无效。 |
返回值
virtual int bytertc::IVideoEffect::SetColorFilter(
const char* resPath)
设置颜色滤镜
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| resPath | const char* | 滤镜资源包绝对路径。 |
返回值
virtual int bytertc::IVideoEffect::SetColorFilterIntensity(
float intensity)
设置已启用颜色滤镜的强度
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| intensity | float | 滤镜强度。取值范围 [0,1],超出范围时设置无效。 |
返回值
virtual int bytertc::IVideoEffect::InitVirtualBackground(
void* androidContext,
void* jnienv,
const char* licensePath,
const char* modelPath)
虚拟背景功能初始化。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| androidContext | void* | Android Context 对象指针(jobject 类型)。非 Android 平台传入 nullptr 即可。 |
| jnienv | void* | Android JNIEnv 指针。非 Android 平台传入 nullptr 即可。 |
| licensePath | const char* | CV 许可证文件的绝对路径 |
| modelPath | const char* | 模型参数文件的绝对路径 |
返回值
virtual int bytertc::IVideoEffect::EnableVirtualBackground(
const VirtualBackgroundSource& source)
开启虚拟背景。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| source | const VirtualBackgroundSource& | 虚拟背景对象,详见 VirtualBackgroundSource 。 |
返回值
注意
virtual int bytertc::IVideoEffect::DisableVirtualBackground()
关闭虚拟背景。
返回值
注意 调用 EnableVirtualBackground 开启虚拟背景后,可以调用此接口关闭虚拟背景。
class bytertc::IVideoProcessor
| 返回 | 名称 |
|---|---|
| virtual IVideoFrame* | ProcessVideoFrame |
virtual IVideoFrame* bytertc::IVideoProcessor::ProcessVideoFrame(
IVideoFrame* src_frame)
获取 RTC SDK 采集得到的视频帧,根据 RegisterLocalVideoProcessor 设置的视频前处理器,进行视频前处理,最终将处理后的视频帧给到 RTC SDK 用于编码传输。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| src_frame | IVideoFrame* | RTC SDK 采集得到的视频帧,参看 IVideoFrame。 |
返回值 经过视频前处理后的视频帧,返回给 RTC SDK 供编码和传输,参看 IVideoFrame。
注意
class bytertc::IRtcRoom
房间接口
| 返回 | 名称 |
|---|---|
| virtual void | SetUserVisibility |
| virtual int | JoinRoom |
| virtual void | LeaveRoom |
| virtual void | UpdateToken |
| virtual int64_t | SendUserMessage |
| virtual int64_t | SendUserBinaryMessage |
| virtual int64_t | SendRoomMessage |
| virtual int64_t | SendRoomBinaryMessage |
| virtual void | Publish |
| virtual void | Unpublish |
| virtual void | PublishScreen |
| virtual void | UnpublishScreen |
| virtual void | SubscribeUserStream |
| virtual void | Unsubscribe |
| virtual void | SetRemoteAudioPlaybackVolume |
| virtual void | PauseAllSubscribedStream |
| virtual void | ResumeAllSubscribedStream |
| virtual void | StartLiveTranscoding |
| virtual void | StopLiveTranscoding |
| virtual void | UpdateLiveTranscoding |
| virtual void | SetRemoteVideoCanvas |
| virtual int | StartForwardStreamToRooms |
| virtual int | UpdateForwardStreamToRooms |
| virtual void | StopForwardStreamToRooms |
| virtual void | PauseForwardStreamToAllRooms |
| virtual void | ResumeForwardStreamToAllRooms |
virtual void bytertc::IRtcRoom::SetUserVisibility(
bool enable)
设置用户可见性。默认可见。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| enable | bool | 设置用户是否对房间内其他用户可见: • true: 可以在房间内发布音视频流,房间中的其他用户将收到用户的行为通知,例如进房、开启视频采集和退房。 • false: 不可以在房间内发布音视频流,房间中的其他用户不会收到用户的行为通知,例如进房、开启视频采集和退房。 |
返回值
注意
kWarningCodePublishStreamForbiden 警告。
virtual int bytertc::IRtcRoom::JoinRoom(
const char* token,
const UserInfo& user_info,
const MultiRoomConfig& config)
创建/加入房间:房间不存在时即创建房间;房间存在时,未加入房间的用户可加入这个房间。
同一房间内的用户间可以相互通话。
进房后重复调用无效,用户必须调用 LeaveRoom 退出当前房间后,才能加入下一个房间。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| token | const char* | 动态密钥,用于对登录用户进行鉴权验证。 进入房间需要携带 Token。测试时可使用控制台生成临时 Token,正式上线需要使用密钥 SDK 在您的服务端生成并下发 Token。 • 使用不同 App ID 的 App 是不能互通的。 • 请务必保证生成 Token 使用的 App ID 和创建引擎时使用的 App ID 相同,否则会导致加入房间失败。 |
| room_id | const MultiRoomConfig& config | 加入的房间 ID。 房间 ID 为长度在 128 字节以内的非空字符串,支持以下字符集范围: 1. 26 个大写字母 A ~ Z 。 2. 26 个小写字母 a ~ z 。 3. 10 个数字 0 ~ 9 。 4. 下划线 "_",at 符 "@",减号 "-"。 |
| user_info | const UserInfo& | 用户信息,参看 UserInfo。 |
| room_config | const MultiRoomConfig& config | 房间参数配置,设置房间模式以及是否自动发布或订阅流。具体配置模式参看 RTCRoomConfig。 |
返回值
注意
virtual void bytertc::IRtcRoom::LeaveRoom()
离开房间。
用户调用此方法离开房间,结束通话过程,释放所有通话相关的资源。
加入房间后,必须调用此方法结束通话,否则无法开始下一次通话。无论当前是否在房间内,都可以调用此方法。重复调用此方法没有负面影响。
此方法是异步操作,调用返回时并没有真正退出房间。真正退出房间后,本地会收到 OnLeaveRoom 回调通知。
注意
virtual void bytertc::IRtcRoom::UpdateToken(
const char* token)
更新 Token。
Token 有一定的有效期,当 Token 过期时,用户需调用此方法更新房间的 Token 信息。
用户调用 JoinRoom 方法加入房间时,如果使用了过期的 Token 将导致加入房间失败,并会收到 OnJoinRoomResult 回调通知,错误码为 ErrorCode 中的 kErrorCodeInvalidToken 。此时需要重新获取 Token,并调用此方法更新 Token。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| token | const char* | 更新的动态密钥。 |
注意
virtual int64_t bytertc::IRtcRoom::SendUserMessage(
const char* uid,
const char* message)
给房间内指定的用户发送文本消息(P2P)
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| uid | const char* | 消息接收用户的 ID |
| message | const char* | 发送的文本消息内容。 消息不超过 62KB。 |
返回值 这次发送消息的编号,从 1 开始递增。
注意
virtual int64_t bytertc::IRtcRoom::SendUserBinaryMessage(
const char* uid,
int length,
const uint8_t* message)
给房间内指定的用户发送二进制消息(P2P)
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| uid | const char* | 消息接收用户的 ID |
| length | int | 二进制字符串的长度。 |
| message | const uint8_t* | 二进制消息的内容。 消息不超过 46KB。 |
返回值 这次发送消息的编号,从 1 开始递增。
注意
virtual int64_t bytertc::IRtcRoom::SendRoomMessage(
const char* message)
给房间内的所有其他用户发送广播消息。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| message | const char* | 用户发送的广播消息 消息不超过 62KB。 |
注意
virtual int64_t bytertc::IRtcRoom::SendRoomBinaryMessage(
int size,
const uint8_t* message)
给房间内的所有其他用户发送广播消息。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| size | int | 发送的二进制消息长度 |
| message | const uint8_t* | 用户发送的二进制广播消息 消息不超过 46KB。 |
注意
virtual void bytertc::IRtcRoom::Publish()
在当前所在房间内停止发布本地音视频流
注意
virtual void bytertc::IRtcRoom::Unpublish()
停止将本端音视频流发布到此房间
注意
virtual void bytertc::IRtcRoom::PublishScreen()
发布本地屏幕共享流到房间。
注意
virtual void bytertc::IRtcRoom::UnpublishScreen()
停止发布本地屏幕共享流到房间。
注意
virtual void bytertc::IRtcRoom::SubscribeUserStream(
const char* user_id,
StreamIndex stream_type,
SubscribeMediaType media_type,
const SubscribeVideoConfig& video_config)
订阅房间内指定的远端音视频流。
无论是自动订阅还是手动订阅模式,你都可以调用此方法按需订阅房间中的音视频流。
该方法也可用于更新已经订阅的流的属性、媒体类型等配置。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| user_id | const char* | 指定订阅的远端发布音视频流的用户 ID。 |
| stream_type | StreamIndex | 流属性,用于指定订阅主流/屏幕流,参看 StreamIndex。 |
| media_type | SubscribeMediaType | 媒体类型,用于指定订阅音/视频,参看 SubscribeMediaType。 |
| video_config | const SubscribeVideoConfig& | 视频订阅配置,参看 SubscribeVideoConfig。 |
注意
virtual void bytertc::IRtcRoom::Unsubscribe(
const char* user_id,
bool is_screen)
停止订阅指定的房间内远端音视频流。
关闭自动订阅功能,使用手动订阅模式时用户调用此方法停止订阅已订阅的音视频流。
此方法仅在关闭自动订阅功能时生效。用户需在加入房间时设置 config 关闭自动订阅功能以使用手动订阅模式。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| user_id | const char* | 指定停止订阅的远端音视频流的用户的ID。 |
| is_screen | bool | 指定停止的流是不是屏幕流。 |
注意
virtual void bytertc::IRtcRoom::SetRemoteAudioPlaybackVolume(
const char* user_id,
int volume)
调节来自远端用户的音频播放音量
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| user_id | const char* | 音频来源的远端用户 ID |
| volume | int | 播放音量,取值范围: [0,400] • 0: 静音 • 100: 原始音量 • 400: 最大可为原始音量的 4 倍(自带溢出保护) |
virtual void bytertc::IRtcRoom::PauseAllSubscribedStream(
PauseResumeControlMediaType media_type)
暂停接收来自远端的媒体流。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| media_type | PauseResumeControlMediaType | 媒体流类型,指定需要暂停接收音频还是视频流,参看 PauseResumeControlMediaType。 |
注意
virtual void bytertc::IRtcRoom::ResumeAllSubscribedStream(
PauseResumeControlMediaType media_type)
恢复接收来自远端的媒体流
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| media_type | PauseResumeControlMediaType | 媒体流类型,指定需要暂停接收音频还是视频流,参看 PauseResumeControlMediaType |
注意
virtual void bytertc::IRtcRoom::StartLiveTranscoding(
ITranscoderParam* param,
ITranscoderObserver* observer)
开启转推直播,并设置合流的视频视图布局和音频属性。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| param | ITranscoderParam* | 转推直播配置参数。参看 ITranscoderParam。 |
| observer | ITranscoderObserver* | 端云一体转推直播观察者。参看 ITranscoderObserver。 设置 observer 接收合流完成的音视频流和 SEI 信息。 |
注意
virtual void bytertc::IRtcRoom::StopLiveTranscoding()
停止转推直播。
关于启动转推直播,参看 StartLiveTranscoding。
virtual void bytertc::IRtcRoom::UpdateLiveTranscoding(
ITranscoderParam* param)
更新转推直播参数。
使用 StartLiveTranscoding 启用转推直播功能后,使用此方法更新功能配置参数。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| param | ITranscoderParam* | 配置参数,参看 ITranscoderParam。 |
virtual void bytertc::IRtcRoom::SetRemoteVideoCanvas(
const char* user_id,
StreamIndex index,
const VideoCanvas& canvas)
设置来自指定远端用户 user_id 的视频渲染时,使用的视图,并设置渲染模式。
如果需要解除某个用户的绑定视图,你可以把 view 设置为空。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| user_id | const char* | 视频来源的远端用户 ID。 |
| index | StreamIndex | 视频流属性,参看 StreamIndex |
| canvas | const VideoCanvas& | 视图信息和渲染模式,参看:VideoCanvas |
返回值
注意
virtual int bytertc::IRtcRoom::StartForwardStreamToRooms(
const ForwardStreamConfiguration& configuration)
开始跨房间转发媒体流。
在用户进入房间后调用本接口,实现向多个房间转发媒体流,适用于跨房间连麦等场景。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| configuration | const ForwardStreamConfiguration& | 跨房间媒体流转发指定房间的信息。参看 ForwardStreamConfiguration。 |
返回值
0: 方法调用成功
<0: 方法调用失败
注意
virtual int bytertc::IRtcRoom::UpdateForwardStreamToRooms(
const ForwardStreamConfiguration& configuration)
更新跨房间媒体流转发信息。
通过 StartForwardStreamToRooms 发起媒体流转发后,可调用本方法增加或者减少目标房间,或更新房间密钥。
调用本方法增加或删减房间后,将在本端触发 OnForwardStreamStateChanged 回调,包含发生了变动的目标房间中媒体流转发状态。
传入参数
| 参数名 | 类型 | 说明 |
|---|---|---|
| configuration | const ForwardStreamConfiguration& | 跨房间媒体流转发目标房间信息。参看 ForwardStreamConfiguration。 |
返回值
0: 方法调用成功
<0: 方法调用失败
注意
virtual void bytertc::IRtcRoom::StopForwardStreamToRooms()
停止跨房间媒体流转发。 通过 StartForwardStreamToRooms 发起媒体流转发后,可调用本方法停止向所有目标房间转发媒体流。
注意
virtual void bytertc::IRtcRoom::PauseForwardStreamToAllRooms()
暂停跨房间媒体流转发。 通过 StartForwardStreamToRooms 发起媒体流转发后,可调用本方法暂停向所有目标房间转发媒体流。 调用本方法暂停向所有目标房间转发后,你可以随时调用 ResumeForwardStreamToAllRooms 快速恢复转发。
注意 调用本方法后,目标房间中的用户将接收到本地用户停止发布 OnStreamRemove 和退房 OnUserLeave 的回调。
virtual void bytertc::IRtcRoom::ResumeForwardStreamToAllRooms()
恢复跨房间媒体流转发。 调用 PauseForwardStreamToAllRooms 暂停转发之后,调用本方法恢复向所有目标房间转发媒体流。
注意 目标房间中的用户将接收到本地用户进房 OnUserJoined 和发布 OnStreamAdd 的回调。