AR/VR融合驱动的综采工作面智能监控关键技术研究与试验
王学文1
刘曙光2
王雪松3
谢嘉成4
王彬彬2
王振威2
1.太原理工大学机械与运载工程学院,山西太原 030024;太原理工大学煤矿综采装备山西省重点实验室,山西太原 030024;矿山采掘装备及智能制造国家重点实验室,山西太原 0300242.太原理工大学机械与运载工程学院,山西太原 030024;太原理工大学煤矿综采装备山西省重点实验室,山西太原 0300243.太原理工大学煤矿综采装备山西省重点实验室,山西太原 030024;矿山采掘装备及智能制造国家重点实验室,山西太原 030024;太重煤机有限公司博士后科研工作站,山西太原 0300244.太原理工大学机械与运载工程学院,山西太原 030024;太原理工大学煤矿综采装备山西省重点实验室,山西太原 030024;太重煤机有限公司博士后科研工作站,山西太原 030024
摘要：为突破综采工作面数据驱动实时监控技术瓶颈,进一步满足对综采工作面协同运行状态的深度感知,以虚拟现实(Virtual Reality,VR)监控技术及成果为基础,以HoloLens2增强现实(Augmented Reality,AR)头显为主要开发设备,结合工业互联网、云技术、数字孪生(Digital Twin,DT)等先进手段,进行AR/VR融合驱动的综采工作面智能监控关键技术研究与实践,充分利用AR技术的特性弥补VR监控与真实场景有割裂感、监测数据来源较为单一的缺陷,使综采工作面智能监控体系得到完善与扩充.提出3种关键技术,并对各关键技术的具体解决方案进行剖析,具体包括:①构建了通用高效可扩展端云协同异步网络框架,基于该框架研究了多终端协同工作关键技术,实现了空间虚实融合全息辅助标注功能.该技术可为综采工作面智能监控全过程中的多人协作提供便利;②将基于稀疏匹配的识别跟踪方法与基于AR标识的识别跟踪方法相结合,实现了对综采工作面全综采装备的识别跟踪,为综采工作面的AR监测与控制提供了先决条件;③在由物理综采工作面、云服务器、数字综采工作面3者构成的数字孪生闭环上,进行多传感器与视觉融合的综采装备位姿监测与运行状态识别,并通过AR交互手段完成了对物理综采工作面的反向控制.在实验室环境下展开测试验证,试验表明,系统数据传输压力小,延迟低,操作流畅无卡顿,在保留VR监控已有优势的基础上进一步提升了沉浸感、便捷性与虚实融合程度,具备单人或多人协作监测综采工作面运行状态并进行反向控制的能力.
关键词：综采工作面增强现实虚拟现实数字孪生端云协同智能监控
分类号：TD67(矿山电工)TP391.9(计算技术、计算机技术)
资助基金：国家自然科学基金(52004174)山西省重点研发计划资助项目(201903D121141)
论文发表日期：2022-02-28
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：17( 969-985 )
英文信息