在工业生产中,设备故障难以避免。以往,现场维修人员遇到复杂故障时,由于自身知识和经验有限,常常无法迅速解决问题。而有了 AR 眼镜,维修人员戴上它后,能将设备故障的实时画面、第一人称视角清晰地传送给远程专家。专家如同置身现场,可仔细观察故障细节。同时,借助 AR 眼镜的多种功能,专家能在远程画面上用激光笔、万事贴等方式精准标注故障部位,圈出需重点检查的零件,还能以语音形式详细说明拆解、维修步骤。

维修人员按照专家的指导,解放双手进行操作,大大提高维修效率。比如在汽车制造工厂,发动机出现故障时,维修人员通过 AR 眼镜,在远程专家指导下,快速排查问题,将原本可能需要数小时的维修时间缩短至几十分钟 。​

系统技术架构

系统主要功能

1、基础通话功能​

包括用户登录、发起呼叫、接听来电、结束通话、网络状况。​

2、实时视频连线​

现场工作人员可借助手机、平板电脑、智能眼镜等设备,通过 4G、WiFi 网络与后方的技术支持专家建立实时视频连接。后方专家能通过实时语音交流或图文信息等形式,与现场人员开展协作,实现远程配合。该功能支持在语音和视频模式间切换,切换至语音模式后,仅进行音频传输,双向视频画面传输将终止。​

3、语音通话功能​

前端与后端之间可进行实时语音沟通,通话相关资料既可以存储在本地设备,也能上传至服务器保存。​

4、图文信息推送​

后端查看端能够向前端推送图文资料供其查看,并且通过后台应用程序,在前端传至后台的视频或照片上添加标记或信息后,这些标记和信息会实时叠加显示在前端的视野范围内。​

5、录像存储功能​

前后端通话结束后,系统会自动存储完整的音视频录像。若与客户的后台业务系统对接,视频可与定位数据同步,用户能够按照时间段或档案名称对视频进行筛选、播放,实现调阅查看的功能。​

6、前端远程操控​

后端查看端可以远程控制前端智能眼镜执行拍照、截屏等操作,还能对拍摄的照片添加标记并发送回前端眼镜。同时,支持后端对前端眼镜摄像头的分辨率、镜头缩放、闪光灯等参数进行调控。​

7、桌面共享功能​

后端查看端打开技术资料文件后,通过桌面共享的方式,将专家电脑上显示的内容推送至前端人员,供其查看。

  1. 画面标记功能

支持画面实时动态圈点标记,也支持画面冻屏后任意编辑。

系统实施流程

  1. 准备两台云服务器,安装Docker环境
  2. 分别安装业务系统和音视频通讯系统
  3. 音视频通讯系统配置证书
  4. 云服务器开放TCP端口和UDP端口范围值
  5. 初始化用户数据库
  6. 测试系统功能
  7. 设置应用开机自启
Logo

火山引擎开发者社区是火山引擎打造的AI技术生态平台,聚焦Agent与大模型开发,提供豆包系列模型(图像/视频/视觉)、智能分析与会话工具,并配套评测集、动手实验室及行业案例库。社区通过技术沙龙、挑战赛等活动促进开发者成长,新用户可领50万Tokens权益,助力构建智能应用。

更多推荐