企业5G机器人智能讲解及AR巡逻开发项目立项报告.docx

5G机器人智能讲解及AR巡逻开发项目立项报告目录一、用户需求分析2二、项目建设目标3三、项目价值分析4四、项目技术方案54.1 总体娜设计54.2 功能架构设计54.3 建设内容54.4 功能实现6一.用户需求分析根据企业和虹桥商务区签订的5G试验区合作协议，虹桥商务区管委会大楼一楼大厅将进行5G覆盖。为了进一步提升展厅服务效率、降低服务成本,提升展厅参观体验，使展厅更具科技感；并积极探索5G相关应用，展示企业在5G方面的技术实力。企业运营支撑中心决定对虹桥商务区管委会大楼一楼大厅展厅进行体验升级改造，并启动了5G机器人智能讲解及AR巡逻监控展示开发项目。基于上述项目背景与目标,本次5G机器人智能讲解及AR巡逻监控展示开发项目的具体需求包括： 将展厅中原来的人工引导讲解更换为5G机器人引导； 对5G机器人进行二次开发，实现机器人智能讲解应用，支持多模式、多语种的引导讲解，支持人脸识别，并与展厅系统和打印机对接，实现在展厅后台系统调阅机器人拍摄的实时画面以及打印参观人员的照片； 开发AR巡逻监控展示应用，让参观/安防人员可以使用AR眼镜进行移动巡逻监控。并对接展厅系统，实现与AR眼镜的画面联动，以及在后台对参观人员和机器二,项目建设目标基于本次5G机器人智能讲解及AR巡逻监控展示开发项目的建设目标与具体需求，本次项目的目标结果包括： 完成5G机器人智能讲解功能开发：对5G机器人进行管控开发，使5G机器人具备智能讲解功能，可以提供包括中英文智能问答，多模式可切换的导航讲解，人脸识别，拍照留念等功能。 实现5G机器人与展厅系统及打印机的对接：D实现机器人与展厅管理系统对接,在后台系统可以调阅机器人拍摄的实时画面；2）与打印机对接，可以打印所选择的人员的照片。 完成AR巡逻监控展示功能开发：开发AR巡逻监控展示应用，让参观体验人员可以使用AR眼镜进行移动巡逻监控。让AR眼镜具备人脸识别功能，可实现风险/重点人物的自动识别与告警。 实现AR应用与展厅系统的对接：实现AR应用与展厅管理系统的对接，实现展厅大屏与AR眼镜的画面联动，以及在后台对参观人员和机器人的实时画面进行智能视频结构化分析。三项目价值分析通过本次5G机器人智能讲解及AR巡逻监控展示开发项目的实施，会将虹桥商务区管委会大楼一楼大厅商务展厅中原来的人工引导讲解更换为5G智能机器人讲解，实现多模式、多语种、智能互动式的参观引导讲解，并在展厅中增加AR巡逻监控的体验项目。这不仅将全面提升整个展区的参观体验效果也是对5G÷AI技术相关应用落地的具体探索，而这对企业当前与未来的业务发展都很有积极意义。具体，本次项目将为企业带来如下收益：,在智能讲解机器人上印制企业标志，作为企业形象宣传，将有效扩大企业品牌影响力；/通过5G智能机器人、AR巡逻监控等相关应用的展示,能更好的体现企业在5G技术和应用方面的能力，更好地向社会大众展示企业在5G展示和应用方面的创新和探索，从而扩大企业的社会影响，进而提升企业形象。四,项目技术方案4.1 总体架构设计5G机器人及AR眼镜通过与展厅系统对接实现导航讲解、AR图像展示等功能,其总体架构设计如下所示：ARBga%二5G机器人展厅后台对接数据抽取数据转换数据装载展厅系统后台数据库h数据清洗4.2 功能架构设计实现与展厅系统对接43建设内容基于本次项目的建设目标与建设内容规划，本次项目产品实现的技术方案主要包括以下三个部分： 5G机器人智能讲解功能开发智能讲解机器人可以提供包括中英文智能问答，多模式可切换的导航讲解，人脸识别，拍照留念等功能，提升服务效率，降低服务成本，提升用户体验,使展厅更具科技感。此外，还需要与打印机对接，可以打印所选择的人员的照片。 AR巡逻监控展示功能开发参观体验人员可使用AR眼镜进行移动巡逻监控，让AR眼镜具备人脸识别功能，可实现风险/重点人物的自动识别与告警，并支持AR眼镜画面的多屏互动。 与展厅系统集成对接实施D5G机器人与展厅管理系统对接，在后台系统可以调阅机器人拍摄的实时画面；2）AR眼镜与展厅管理系统对接在展厅大屏上展示参观人员AR眼镜上的实时画面；3）可在展厅后台系统读取参观人员和机器人的实时画面并进行智能的视频结构化分析。4.4功能实现（1）5G机器人D多语言功能 声源定位可以定位声源人的方位,并使机器转动身体面朝声人的方位，并使机器转动身体面朝声源人。（本地实现） 语音交互用户与机器人进行语音交互时，需要将机器人唤醒，才可与机器人进行对话交互。（本地实现） 语音识当机器人检测用户语音结束时，会进行语音识别（本地实现） 语义分析当机器人将用户的语音转换成文本后，通过相关云端库，解析用户所发语音的具体含义，确定主要执行的动作（云端实现） 语音合成机器人进行语义理解之后，通过音合成，反馈给用户（本地实现）2）多导航功能 多导航知识库实现多导航知识库设计（云端实现） 多导航模式切换支撑多导航模式知识库的快速切换（云端实现） 多参观模式切换支撑多种参观模式的导航应用（本地实现）3）人脸识别功能 人脸识别功能当用户靠近机器人时，会主动进行脸识别人脸（本地实现） 接待功能自动识别普通人员/领导,自动切换并执行相应接待导航模式（云端实现）4）系统对接展厅系统对接支持展厅系统对接（云端实现）打印机对接支持打印机对接（云端实现）（2）AR眼镜D多屏互动功能识别画面支持AR眼镜识别画面，识别成功之后，图片上将出现加载动画，随后显示AR视频（云端实现）展示画面通过与大屏联动，实现AR视频展示（云端实现）2） AR移动监控巡逻 视觉校准支持使用“视觉校准”来调整显示效果，从而获得更好的增强现实体验。（本地实现） 画面校准支持校准左右画面（本地实现） 智能视濒结构化分析参观体验人员可以使用AR眼镜进行移动巡逻监控，在后台可以读取参观人员和机器人的实时画面并进行智能的视频结构化分析（云端实现3）人脸识别功能自动识SiJ支持根据知识库自动识别人物（云端实现）风险告警支持重点/风险人物告警（云端实现）知识库维护支持知识库维护（云端实现）4）系统对接展厅系统对接支持与展厅系统对接，实现AR图像展示（云端实现）