功能简介
AuraVision 是 Yealink 新一代 AI 视觉技术。该技术通过高精度空间校准,将多台摄像机与 Yealink Dante 天花板麦克风(CM50)纳入统一的空间坐标系,实现高精度空间追踪,让会议更智能、更精准,画面构图更自然。
AuraVision-ST (麦摄联动-单发言人)使用 CM50 调用对应区域的预置位,然后通过摄像机内置麦克风在该区域内进行语音追踪并确认发言者。系统可实时锁定当前发言者,使远端参会者如同坐在前排般清晰地看到正在发言的人员。画面始终跟随会议对话节奏,云台的水平、垂直和变焦运动过程完全隐藏,参会者只能看到流畅、自然的画面切换。该功能支持主摄像机和备摄像机,适用于 U 型会议室布局。
支持的设备
所需摄像机型号:SmartVision 80
所需麦克风型号:CM50
所需 AV 交换机型号:RCH80、RCH240 或 NETGEAR M4250 系列
前提条件
请确保设备已升级到以下版本或更高版本。
型号
版本号
Yealink Room Designer
AP08
CM50
AVHub
SmartVision 80
设备连接
部署建议和注意事项
摄像机部署位置推荐
摄像机数量会影响画面切换速度,以及是否能在切换画面时遮蔽云台转动过程。根据会议室规模和座位布局选择部署方案。
部署环境
摄像机数量
适用场景
部署参考图
中大型会议室
5 台
单侧约 8 人的中大型会议室
在会议桌左侧上方和左侧下方分别并排部署 2 台摄像机,分别面向上、下两排参会席位;另在会议桌左侧中部部署 1 台摄像机,面向会议桌中间区域。上、下两组摄像机分别用于覆盖对应排的参会席位和发言区域,可将同一追踪区域同时绑定 2 台摄像机,以覆盖该区域的不同席位方向;中部摄像机用于补充会议桌中间区域的画面覆盖。
U型会议室
6
宽距U型会议室
在 U 形会议桌的上侧、中侧和下侧各部署 1 台摄像机,分别面向对应方向的参会席位。上侧摄像机用于覆盖上方横向席位,中侧摄像机用于覆盖中间区域,下侧摄像机用于覆盖下方横向席位。将各摄像机绑定至其对应的追踪区域。
中大型培训室
5 台
可容纳约 40 人的中大型培训室
在大屏两侧分别部署 2 台摄像机,面向对应的会议桌区域,左侧相机绑定左边区域,右侧相机绑定右边区域,一个区域需绑定 2 台摄像机;另在两组会议桌下方的中部部署 1 台摄像机,面向讲台区。
大型培训室
7 台
可容纳约 200 人的大型培训室
在会议室上侧沿墙面部署 6 台摄像机,分别面向左、中、右桌组;另在会议桌区域中部部署 1 台摄像机,用于补充中间区域的画面覆盖。上侧 3 台摄像机分别绑定左侧、中间和右侧追踪区域;中部摄像机绑定中间追踪区域。
摄像机部署注意事项
常规会议室/U型会议室
摄像机位置
推荐安装高度
部署要求
中间摄像机
高于桌面 0.1 m 至 2.4 m
正对主位安装。
侧边摄像机
1.8 m 至 2.4 m
调整摄像机朝向,使麦摄联动区域尽量位于副镜头画面中心,降低音源位于副镜头边缘时的定位波动。
每个区域建议部署 2 台相机。区域激活时,系统优先调用已经在该预设位的相机。如果某个区域只部署 1 台相机,多人交替发言时,容易看到相机转动过程。
并排安装两台侧边摄像机时,调整安装位置,避免副镜头视野被相邻摄像机机身遮挡。在旋转角度≤25度的前提下,避免相机紧挨,两个挂架中心间距不小于 24 cm,两相机机身之间空隙大于4 cm可避免遮挡;也可采用上下正倒挂方式避免遮挡。
培训室
摄像机类型
推荐安装高度
部署要求
麦摄联动区域摄像机
2.2 m 至 2.5 m
靠近屏幕左右两侧,确保能够拍摄到人员正脸。
每个区域建议部署 2 台相机。区域激活时,系统优先调用已经在该预设位的相机。如果某个区域只部署 1 台相机,多人交替发言时,容易看到相机转动过程。
演讲者区域摄像机
1.8 m 至 2.4 m
正对讲台、屏幕或白板区域。
CM50部署注意事项
CM50 的部署位置直接影响声源定位稳定性。需结合桌面、座位和目标拾音区域确定安装位置。
场景
部署要求
常规会议室/U型会议室
CM50 推荐安装高度不超过 3.7 m,最高不超过 4.5 m。
靠近桌前边缘的位置约 1.5 m 处部署 1 台 CM50(因桌前侧的发言人相对 CM50 往往处于背向发声的位置,声源定位效果较弱),后续 CM50 的间距为 4 m 至 5 m。
中型会议室(当前侧摄像机与主位的距离不超过 8 m 时),2 台 CM50 可覆盖中型会议室;
大型会议室(当前侧摄像机与主位的距离不超过 12 m 时) ,3 台 CM50 可覆盖大型会议室。
培训室
CM50 推荐安装高度不超过 3.7 m,最高不超过 4.5 m。
听众区中,最靠近讲台区的 CM50 与第一排听众座位的距离不应超过 1.5 m;其余 CM50 以 4 m 至 5 m 的间距均匀部署。
若舞台区与听众区之间的距离不足 1 m,或舞台区存在较多站立发言场景,建议使用单独的 CM50 覆盖舞台区。
部署完成后检查
完成物理安装后,再配置追踪区域和预设位。配置前请确认以下事项:
实际摄像机点位、朝向和数量与 Room Designer 中的设计一致。
CM50 覆盖范围与实际座位和发言区域对应;第一排、主位和舞台区等边缘位置已进行重点检查。
相邻摄像机之间不存在机身遮挡,且区域切换时不会因摄像机复用造成不可接受的画面等待。
在 Designer 中配置
使用 Wizard 在 Designer 中创建会议室
打开 Room Designer,创建会议室并进入 Wizard。
在房间类型中,选择普通会议室/BYOD会议室/培训会议室,根据实际会议室信息和所用设备在Wizard中填写相关内容。详细信息,可参阅:房间设计向导。
在音频配置中,选择 CM50。其他麦克风当前不支持麦摄联动。
在摄像机配置中,选择 SmartVision 80, 多摄和麦摄联动,并将追踪效果设置为单发言人。
根据需要开启:
全景相机:启用后会在会议室添加一台相机用于输出会议室全景画面,该相机不参与麦摄联动。
演讲者追踪相机:启用后会在会议室后侧额外增加一台相机运行演讲者追踪功能。
保存方案后,进入空间设计 > 相机,即可查看麦摄联动方案设计。
测量并设置设备位置
测量设备实际角度和位置后,将坐标角度填入 Room Designer。
先确认设备的旋转角度,再测量坐标。调整设备旋转角度后,设备基准点的位置会变化,需要重新测量并更新坐标。
点击 Room Designer 上方运行进入运行模式,将组件与实际设备绑定,详细信息,可参阅:发现设备并绑定。
双击对应摄像头组件,进入图像设置,将摄像头切换为副摄像头,查看副摄像头是否已完全覆盖麦摄区域,若未完全覆盖,需要调整镜头至完全覆盖。
确认设备的旋转角度:
SmartVision 80:根据底座角度贴纸确认实际旋转角度。
CM50:以 Yealink 标识所在方向作为方向参考,测量CM50旋转角度。
测量设备坐标和高度:
设备
基准点
测量方法
SmartVision 80
电子镜头底部外侧的中间点
将测距仪的红色激光点对准基准点,测量基准点到地面的垂直距离作为设备高度;再测量基准点到两面参考墙的距离,作为 X、Y 坐标。
CM50
设备对角线交叉的中心点
将测距仪的红色激光点对准 CM50 中心点,测量基准点到地面的垂直距离作为设备高度;再测量基准点到两面参考墙的距离,作为 X、Y 坐标。
选择对应的摄像机或 CM50,将实测的 X、Y 坐标、高度和旋转角度更新到设备属性中。请确保 X、Y 坐标分别对应房间设计图中的正确轴向;若现场参考墙与设计图的轴向不同,X、Y 值可能需要互换。
进行发言人定位
房间配置处于运行状态下,启用发言人定位功能,通过麦克风上报的真实声源点位,可辅助人工精准划分追踪区域、微调区域范围,避免出现区域错位、覆盖不全的问题。
点击发言人定位开启功能,让现场人员在目标席位实际发言,观察声源定位点是否稳定落在目标区域:
如果声源点长期偏离区域,调整追踪区域的位置和大小。参阅:调整追踪区域。
如果相邻区域频繁跳转,检查麦克风部署位置和区域划分方式是否正确。
如果位置偏离过大,检查麦克风logo是否和设计文件中的logo朝向一致。
完成定位后,保证摄像头位置不变,点击校准所有摄像头,进行摄像头校准。若后续摄像头位置调整,需要重新校准。
调整追踪区域
选择 Wizard 自动生成的预设进行区域配置。
如果Wizard自动生成的追踪区域不满足需求,可以点击新建区域,具体参阅:进行空间设计-配置视频。
根据实际会议室情况,选中对应区域,调节区域位置和大小。配置追踪区域时,遵循以下原则:
推荐区域粒度如下:
常规/U型会议室:每 2 个座位(宽度 1.2m 左右)设置为 1 个区域。
培训室:每 16 个座位(4 行 4 列)设置为 1 个区域。
区域位置必须与实际物理位置对应,并在上下方向预留一定空间,建议上下各预留约 0.5 m 的空间。可以减少参会者前倾、后仰或轻微移动导致的区域脱离问题。
你可以优先使用矩形区域。若 Designer 提示区域超出相机视野,可根据实际情况将追踪区域形状调整为四边形,以适配镜头视野限制。
在右侧属性栏设置追踪区域形状为四边形,调节数值。
选择追踪区域,右击选择切换为四边形,调节形状。
绑定相机
选中区域后,为该区域绑定摄像机。确保所绑定摄像机朝向该追踪区域,且摄像机视野能够覆盖区域内的参会者。
调整预设位画面
绑定摄像机后,右侧会显示摄像机的实时画面,并支持手动调节预设位。确保摄像机调用预设位后能够拍摄到发言人正脸,并尽量保持正面或侧前方视角。摄像机相对追踪区域中线的水平偏移建议控制在约 30° 以内。
预设位画面必须与区域覆盖位置对应,不应只覆盖区域边界本身,建议:
在区域覆盖范围的基础上,左右各外扩一个座位左右的宽度。
如果是边界区域,仅向有人的一侧外扩。
这样可以提高在相邻区域误触发、发言人位于区域边缘、声源定位存在轻微偏差的场景下的稳定性。
调整预设位时,不仅需要能够框选到目标预设位,还应能够在该预设位下通过广角镜头覆盖目标发言人所在区域。
配置辅助追踪区域
辅助追踪区域用于配置辅助追踪功能。您可以在该区域中选择不同的追踪功能,并为当前区域绑定摄像机、设置工作模式。辅助追踪区域适用于讲台、演讲区、白板区等需要由专用摄像机持续跟踪目标的区域。
辅助追踪区域用于配置辅助追踪功能。你可以在该区域中选择不同的追踪功能,并为当前区域绑定摄像机、设置工作模式。辅助追踪区域适用于讲台、演讲区、白板区等需要由专用摄像机持续跟踪目标的区域。
点击 添加一个新的区域,并设置追踪功能,支持以下追踪功能:
手动控制:由用户手动控制摄像机画面,不执行自动追踪。
自动框人像:对区域内检测到的人像进行自动框取,使人物保持在合适的画面范围内。
演讲者追踪:对演讲区域内的目标进行持续跟踪。
根据所选追踪功能,调整辅助区域大小,绑定对应摄像机。
配置演讲者追踪区域时,建议将区域朝显示屏或电视墙方向适当延伸,使区域边界覆盖显示屏后侧。人员在该区域内站立发言时,声源定位点可能位于实际站位后方。若区域边界过于贴近显示屏,定位点可能落在区域外,影响演讲者追踪功能的触发和画面切换。
绑定完成后,对追踪功能进行设置。
配置会议画面
你可以对会议中画面的显示进行设置,如无人发言时(CM50在麦摄联动区域未检测到活跃声源),有人发言时(CM50在麦摄联动区域未检测到活跃声源),演讲者追踪时(用户配置的条件同时满足时进入)的画面布局。
麦摄联动区域静默:
设置无人发言时显示的画面及布局,在右侧绑定摄像机。
参数
说明
布局模式
单方全屏:仅显示 1 个主画面区域。
该模式适用于仅需突出 1 路视频画面的场景,例如显示主讲人、主席位或指定机位。配置时,你只需在画面区域中添加 1 台摄像机。
等分模式:将显示区域划分为多个大小相同的子画面,并在每个子画面中分别显示不同摄像机的画面。支持 2-6 等分的画面组合。
该模式适用于需要同时展示多路摄像机画面的场景,例如同时显示多个发言区域或多个固定机位。
画中画模式:在 1 个主画面的基础上叠加 1 个小窗画面。可以进一步设置画中画大小和画中画位置,以控制小窗画面的显示比例和显示位置。
该模式适用于在突出主画面的同时,保留另一辅助视角的场景。
1+N模式:显示 1 个主画面和 N 个辅画面。其中,主画面区域较大,用于突出显示重点内容;辅画面区域较小,用于同时展示其他辅助视角。支持 1+1 至 1+5 的主次画面组合。
该模式适用于需要突出主要画面,同时保留其他摄像机辅助视角的场景。例如,可以将主讲人画面设置为主画面,将听众区、全景位或其他补充机位设置为辅画面。
画面遮蔽
开启后,系统可以使用两台手动控制相机或麦摄联动相机作为默认画面的备用相机,以减少回退到默认画面时用户看到相机转动过程的情况。
无人发言回全景画面时间
设置在全场静音、没人讲话后,恢复到无人发言画面布局的时间间隔。
麦摄联动区域有人发言:
设置有人发言时显示的画面及布局,在右侧绑定摄像机。
参数
说明
布局模式
单方全屏:仅显示 1 个主画面区域。
该模式适用于仅需突出 1 路视频画面的场景,例如显示主讲人、主席位或指定机位。配置时,你只需在画面区域中添加 1 台摄像机。
画中画模式:在 1 个主画面的基础上叠加 1 个小窗画面。可以进一步设置画中画大小和画中画位置,以控制小窗画面的显示比例和显示位置。
该模式适用于在突出主画面的同时,保留另一辅助视角的场景。
画面遮蔽
开启后,系统可以使用两台手动控制相机或麦摄联动相机作为默认画面的备用相机,以减少回退到默认画面时用户看到相机转动过程的情况。
麦摄联动响应速度
控制系统拾取到人声后,触发摄像头转向发言区域、切换画面布局的速度。
快
中
慢
演讲者追踪功能触发:
在配置了演讲者追踪区域后,该部分可配置。
参数
说明
场景预设
自定义:手动配置画面布局,以及进入和退出演讲者追踪画面的触发条件。
演讲者优先:根据演讲者追踪功能触发状态切换麦摄联动和演讲者追踪画面。演讲者追踪区域声源活跃且功能触发时切换到演讲者画面,演讲者追踪功能停止时切换到麦摄联动画面。
交流模式:根据演讲者和其他参会者的发言状态切换麦摄联动和演讲者画面。演讲者追踪区域声源活跃且功能触发时切换到演讲者画面,演讲者追踪区域声源静默麦摄联动区域声源活跃时切换到麦摄联动画面。
问答模式:演讲者追踪触发后,其他区域有人发言时,以画中画方式同时显示发言人与演讲者画面。
布局模式
单方全屏:仅显示 1 个主画面区域。
该模式适用于仅需突出 1 路视频画面的场景,例如显示主讲人、主席位或指定机位。配置时,你只需在画面区域中添加 1 台摄像机。
画中画模式:在 1 个主画面的基础上叠加 1 个小窗画面。可以进一步设置画中画大小和画中画位置,以控制小窗画面的显示比例和显示位置。
该模式适用于在突出主画面的同时,保留另一辅助视角的场景。
进入演讲者追踪画面
用于设置系统切入演讲者追踪画面的触发条件。勾选项同时满足时可触发:
演讲者追踪功能被触发:当演讲者追踪功能启动时,系统进入演讲者追踪画面。
演讲区域声源活跃:当演讲区域检测到声源活跃时,系统进入演讲者追踪画面。
退出演讲者追踪画面
用于设置系统退出演讲者追踪画面的触发条件。勾选项同时满足时可触发:
演讲者追踪功能停止:当演讲者追踪功能停止时,系统退出演讲者追踪画面。
演讲区域声源静默:当演讲区域持续静默时,系统退出演讲者追踪画面。可配置持续静默的时间。
麦摄联动区域声源活跃:当其他麦摄联动区域检测到声源活跃时,系统退出演讲者追踪画面。
验证性能
调整完成后,通过 USB 将 AVHub 连接到 MCore 或 PC,加入 Teams 会议,检查麦克风与摄像头联动是否已配置成功。可参照下表进行验证。
场景
验收标准
在拾音区内拾音区中部拾音区边缘
正确切换到对应的预设位;在连续发言期间,画面保持稳定,不会出现反复切换或其他异常。
在不同拾音区交替发言
预设位切换正常。
不同拾音区同时发言
预设位不会频繁切换,保持在当前预设位稳定。
会议中静音
恢复默认布局。
长时间无人发言
恢复默认布局。
本地无人发言,远端与会者继续发言
恢复默认布局且不切换到其他预设位。