一、AI一体机说明
AI一体机基于欧拉系统进行业务部署,出厂前已预装好所需的Stream(录播)系统、LLM大模型等组件,不需要额外安装,用户仅需要将AI一体机上架,修改IP后重新运行系统脚本,即可进行使用;
AI一体机支持对接UC/Smart,两套不同的平台,不同场景下AI一体机所需的版本不同,需要注意对接版本;
AI一体机对接不同平台的功能存在差异,具体参考下表
功能
UC
49.1.0.X
Smart
26.0.0.X
功能说明
Stream版本
30.1.0.x
32.0.0.2
语音转写与声纹区分
语音转写
支持
支持
支持实时语音转写和离线语音转写,实时转写时延<1秒,转写准确率最高达96%以上(特定场景);
热词
不支持
支持
支持自定义热词、支持个人热词和企业热词;
发言区分
不支持
支持
支持发言人区分、发言人识别、支持声纹录入、删除
自定义语言模型
不支持
支持
支持企业上传内部文档,作为训练数据自定义语言模型,增强ASR专业词汇、通用性表达的准确率
线上会议纪要
智能纪要
支持
不支持
支持配置自动开启线上会议智能纪要,开启后,会议将开启云录制,会议结束后,将自动生成纪要总结
字幕转写
支持
不支持
支持实时转写并显示字幕,字幕支持横幅查看;
线下会议纪要
关联会议日程
不支持
支持
支持关联日程自动开启会议纪要,跨终端同步、实时同步查看、会后归到个人管理
混合使用
不支持
支持
支持线上+线下会议,支持跟腾会、飞书、亿联、ume多视频会议平台混合使用
纪要分发
不支持
支持
会议结束后,支持会议纪要分发、扫码带走以及邮箱发送
转写记录
不支持
支持
支持转写结果与原始音频的毫秒级对齐,形成可点读、可回放的“音频映射”
会议智能总结
不支持
支持
主题生成、关键词生成和一键定位、智能概要总结、智能章节、议题总结、发言人总结等多维度总结;
支持场景化模版、用户自定义纪要模版;
待办事项
不支持
支持
支持生成待办事项,包含待办事项、责任人、时间节点,支持原文回溯
智能问答
不支持
支持
支持基于会议内容的智能问答,支持自然语义理解与多轮对话
纪要文件管理
不支持
支持
支持会中回顾本厂会议的全部转写记录,可通过搜索关键词和筛选发言人快速定位内容,支持对历史录制文件、删除转写记录的智能纪要文件进行重新转写,重新生成智能纪要
线下会议字幕与翻译
字幕翻译
不支持
支持
支持中英互译,后续将会拓展私有化小语种转写和翻译;
群聊总结
群聊总结
支持
不支持
支持选择会话、会话时间、发言人针对性执行群聊总结;输出内容支持群聊原文回溯,提高总结可用性
群聊问答
支持
不支持
支持话题提取、分析话题进展、话题内容以及待办事项;支持基于群聊内容的智能问答,支持自然语言理解与多轮对话
说明:UC对接AI一体机,是在原有Stream(录播系统)的基础上,新增了AI的各项功能,Stream功能参考UC一本通,本文仅介绍AI相关能力
二、AI一体机网络调整方式
1-管理口信息
AI一体机开箱需要通过管理口进入操作,管理口默认地址贴在服务器上方,标签中包含
管理口默认IP:
管理口默认用户名/密码:
出厂状态下的设备,在增删改网卡之前,一定要将所需要变更的网口接上网线(保持网口灯亮状态),才能看到/更改网卡配置
2-管理口登录
先将一体机上电,然后登录管理口
① Mgmt管理口示意图如下
② 电脑连接Mgmt,更改电脑地址
电脑地址修改为和AI一体机相同网段的地址(如标签地址为192.168.2.254,则配置电脑的网卡地址为192.168.2.1)、掩码255.255.255.0
③ 登录Mgmt口的web界面
电脑先ping测试 192.168.2.100 是通的,再打开浏览器输入 192.168.2.100
启动虚拟控制台
输入用户名和密码(默认为 root/Yms.yealink)
鼠标右键,选择 “在终端中打开”
3-管理口修改IP
将所需要使用的网口全部接上网线,输入查看网卡信息命令,看哪张网卡的状态是UP
注意:出厂设备一定要将所需要的网口接上网线(保证接口状态亮灯启用)才能看到/更改网卡配置从左到右为 enp125s0f0、enp125s0f1、enp125s0f2、enp125s0f3
ip addr
vi /etc/sysconfig/network-scripts/ifcfg-enp125s0f0
enp125s0f0网卡名称以实际UP的网卡为准,按 i 进行编辑,需要调整的信息如下
(1)将BOOTPROTO调整为 static
(2)将ONBOOT调整为yes
(3)输入客户提供的IP地址相关信息
IPADDR=客户提供的地址
GATEWAY=客户提供的网关
NETMASK=实际的掩码
DNS=客户提供的DNS地址
修改完成后,按“esc”退出编辑,输入“:wq”保存
#依次输入如下命令
nmcli c reload
nmcli c up ifcfg-enp125s0f0
#根据修改的网卡名称进行调整
ip addr
#查对应网卡是否连接,如途中位置显示ip对应网卡文件IPADDR地址,则成功
cat /etc/resolv.conf
#查看配置的dns地址
4-IP可用性验证
(1)在管理口界面中ping 客户提供的网关地址,看连通性是否正常
(2)在管理口界面中ping需要对接的其他平台地址,看联通行是否正常
(3)使用客户网络中的设备,ssh链接到服务器,看能否正常连接服务器SSH方式
5-AI一体机安装、升级(修改IP可以不用关注)
需要下载Stream版本及LLM大模型版本,AI一体机需要使用UOS的版本包
版本获取位置
具体安装/升级操作如下
cd /home
tar zxvf AI一体机的版本.tar
tar zxvf LLM版本.tar
cd apollo_deploy
./scripts/install.sh init
vi /opt/apollo/data/globals.conf
./scripts/install.sh deploy (会自动跑LLM安装)
6-重跑系统脚本
cd /home/apollo_deploy
./scripts/install.sh deploy
重跑过程大约30-40min,跑完后看到最后的success即可进行业务配置
三、AI一体机网页登录及服务配置
1-网页登录方式
使用配置好的IP,在浏览器中输入https://ip地址,即可访问网页
用户名:admin
密码:V123456789
2-大模型配置
系统重跑脚本后,大模型启动需要8-10分钟,可在网页上观察大模型引擎位置是否出现“本地引擎”的选项,有出现证明大模型启动成功,可以继续进行配置
点击“引擎配置”-添加,保存默认配置即可
3-对接UC/Smart配置方式(需要先完成对接)
(1)对接UC
对接UC配置方式
(2)对接Smart
对接Smart配置方式
4-Stream服务配置
所有服务均建议进行配置,其中下图红框中的服务配置单独说明
(1)AI大模型服务
实例数:1
NPU:0,1(一定不要全选)
(2)会议纪要服务
需要引用上文配置的LLM大模型
(3)AI翻译引擎服务
NPU:2
(4)AI视觉增强服务
NPU:3
四、AI一体机功能使用
1-对接UC功能使用方式(待补充)
(1)UC许可要求
许可名称
数量
说明
配置
人脸库许可
根据人脸数
AI人脸识别服务使用
电子铭牌许可
AI 智能纪要许可
已开启智能纪要权限的会议,支持自动生成转写记录和 AI 智能纪要。已开启语音 AI 权限的会议组织者,支持会后手动生成转写记录和 AI 智能纪要
开启会议室智能会议纪要权限及AI权限
(2)UC服务端配置
(3)UC功能使用
2-对接Smart功能使用方式
(1)许可说明
许可名称
数量
作用
人脸库许可
人数
人脸识别
智能纪要许可
1
是否具有智能纪要功能
智能纪要设备许可
根据设备数量
支持智能纪要功能的设备数量
字幕和翻译许可
1
是否具有字幕和翻译功能
字幕和翻译容量包许可
根据时长
能够支持的时长
智能纪要问答许可
/
智能纪要问答功能
导入完成后,需要为会议室分配许可,才能够使用
(2)基础功能配置使用
Smart+AI一体机,需要搭配Rooms-AI APP一起使用,需要将设备:上报至Smart平台--绑定空间--安装APP后才能够进行使用
①设备上报Smart平台
设备上报
②绑定空间
绑定空间
③安装APP
使用Smart为设备安装APP
AI-APP下载位置
(3)声纹识别功能使用
V25版本
①打开Smart平台对接的第三方平台客户端,工作台---smart对应的应用,点击右上方”个人资料-声纹录入“
V26版本
①打开Smart平台对接的第三方平台客户端,工作台---smart对应的应用,点击右上方”智能纪要”,选择AI配置-声纹录入“
②手机或电脑第三方软件中,通过工作台,预约一个会议,需要声纹识别人,必须选中,声纹识别条件如下:
③在预约的会议日程开始前10min内,或会议结束前打开AI-APP后进行功能测试
支持扫码控制纪要
智能会议纪要功能-发言人语言设置
翻译字幕功能-字幕显示样式设置
-字幕样式:字幕模式是指在主屏正下方以横幅的形式显示,类似于电影字幕,常用于只有单屏的情况下;
全屏模式指的是全屏展示字幕和翻译内容,会遮盖屏幕原有内容,也会被后续开启的应用界面遮盖,一般是用于双屏展示的场景,可开启“仅附屏展示”,这样可在主屏上显示会议辅流内容,附屏展示字幕和翻译内容;
-字幕大小:提供大、中、小字体适配不同规格的会议室;
翻译字幕功能-识别语言及翻译语言配置
翻译语言支持情况:
云端大模型支持语言如下:
-支持的源语言有:中文、英文、西班牙、越南语、阿拉伯语、泰语、日语、韩语、俄语;
-翻译目标语言:中文、英文、德语、俄语、阿拉伯语、荷兰语、葡萄牙语、法语、意大利语、马来语、印尼语、越南语、捷克语、波兰语、泰语、韩语、西班牙语、日语、土耳其语、印地语;
会议结束后可在smart平台中查看智能会议纪要详情
对接Smart案例
使用smartdemo实现AI功能演示