bim ar，一种基于bim与ar技术的可视化风险辨识方法及设备与流程

本发明涉及工程建造技术领域，具体来说是一种基于bim与ar技术的可视化风险辨识方法及设备。

背景技术：

ar技术(，增强现实技术)，是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3d模型的技术，这种技术的目标是在屏幕上实现虚拟世界与现实世界之间的互动。这种技术最早在1990年提出，随着随身电子产品cpu运算能力的提升，其预期增强现实的用途将会越来越广。在ar设备中，头盔式显示器(head-,简称hmd)被广泛地应用于虚拟现实系统中，用以增强用户的视觉沉浸感。

目前ar技术主要应用于移动应用交互，在工程实际应用中尚处于探索阶段。本申请的发明人发现，在风险识别工作中，ar与bim技术结合有着天然的互补效应，利用bim的三维可视化展示和模型结构化数据的特征，ar可提供带入感的反馈交互进行叠加，可提供较好的风险辨识可视化效果及预警展示。鉴于此，本申请发明人设计了一种基于bim与ar技术的可视化风险辨识方法及设备。

技术实现要素：

本发明的目的在于解决现有技术的不足，提供基于bim与ar技术的可视化风险辨识方法及设备，对工程一线的风险源进行辨识，并利用可视化效果反馈于用户，以达到风险源快速辨识、辨识后发出危险警告，风险信息展示及提示采取措施的作用，从而确保工程一线人员在施工环境下的人身安全。

为了实现上述目的，设计一种基于bim与ar技术的可视化风险辨识方法，其特征在于所述的可视化风险辨识方法包括如下步骤：

通过移动端采集用户位置及用户位置处的现实影像以实时上传至后台客户端，并接受客户端所发出的反馈信息。

通过后台客户端对现场进行bim建模并实时接收移动端所采集的用户位置及用户位置处的现实影像，对现实影像进行特征识别以与预设的风险类型库进行特征相似度匹配，若特征相似度达到预设的阈值，则后台客户端在bim模型中标识出该类风险，并向移动端发出包括bim模型图像的反馈信息。

本发明还具有如下优选的技术方案及实施步骤：

步骤a.采用真实的绝对坐标，通过后台客户端建立现场的bim模型。

步骤b.采用机器学习模块对预设的风险特征进行学习，利用风险源图片作为训练数据源，将风险源图片的几何特征、颜色、行为状态及物理属性作为风险特征，并对应将输出变量设为风险源的类型，利用cnn神经网络对全体训练库中数据进行分类和回归分析，得出预设的风险特征和输出变量的相关性模型，并将预设的风险特征和输出变量的相关性模型存储于后台客户端的风险类型库中。

步骤c.通过移动端采集用户位置、姿态及用户位置处的现实影像并上传至后台客户端，由客户端对现实影像进行对象识别与边缘提取，并将提取得到的特征与风险类型库中预设的风险类型进行匹配考证含金量排行榜，若匹配度大于预设阈值，则判定现实影像中的识别对象为该类风险。

步骤d1.若用户位置处的现实影像中存在风险特征，则通过用户实际定位在bim模型中所处的绝对位置，结合ar技术的api接口的目标追踪算法，用3d引擎渲染被摄图像上的风险特征，并且把增加的虚拟信息姿态根据估计出的实际对象的姿态矩阵进行变换。

步骤d2.若用户位置处的现实影像中存在风险特征，则利用bim可视化模块，叠加显示当前定位及姿态下所有风险特征所预设的相对应的风险预警信息，并提示可采取的建议措施。

步骤e.系统在辨识到风险特征后自动计时，若因人员未做反应或未及时远离风险特征导致识别到风险特征存在持续时间达到设定时间，则移动端将以声音警报形式对用户进行持续警告，并自动生成风险警报，通过无线模块上传至后台服务器端，通知现场监控室管理人员。

所述的步骤c包括如下步骤：

风险类型库中预设的风险特征项集用d1＝d1(p1，p2，…，pn)表示。

现实影像的特征集用d2＝d2(p’1，p’2，…，p’n)表示。

将d1和d2之间的内容相关度sim用特征集在几何空间坐标下所表示向量之间夹角的余弦值表示，以用于判断相似程度，w1k、w2k分别表示d1和d2第k个特征项的权值。

本发明还设计一种用于所述的基于bim与ar技术的可视化风险辨识方法的设备，所述的设备包括：

用于采集用户位置及用户位置处的现实影像以上传至后台客户端，并接受客户端所发出的反馈信息的移动端。

用于对现场进行bim建模并接收移动端所采集的用户位置及用户位置处的现实影像，对现实影像进行特征识别以与预设的风险类型库进行特征相似度匹配，当特征相似度达到预设的阈值，则在bim模型中标识出该类风险，并向移动端发出包括bim模型图像的反馈信息的后台客户端。

本发明同现有技术相比，其优点在于：

(1)利用bim与ar技术提供可视化风险辨识方案，直观快速的对风险特征进行辨识。

(2)将风险信息与预设建议的应对措施反馈给用户，第一时间告知用户，提供有力的决策支持。

(3)用bim与ar技术对风险可视化管理与预警，提升工程现场安全水平。

附图说明

图1是一实施方式中本发明基于bim与ar技术的可视化风险辨识方法的方案架构示意图。

图2是一实施方式中基于bim与ar技术的可视化风险辨识方法的步骤流程图。

具体实施方式

下面结合附图对本发明作进一步说明，这种装置及方法的结构和原理对本专业的人来说是非常清楚的。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

参见图1和图2，在本实施方式中bim ar，一种基于bim与ar技术的可视化风险辨识方法及设备与流程，基于bim与ar技术的可视化风险辨识方法的大体步骤如下：

步骤1：利用bim建模软件创建项目，选用真实的绝对坐标建模。

步骤2：bim工程现场模型建立，赋予基础的工程实体几何外观信息及需要展示的场地内工程实体及物品附加信息。

步骤3：利用移动设备的摄像头采集现实影像，移动设备内包含有定位模块和陀螺仪以采集用户位置，所述的陀螺仪还能采集用户的姿态。

步骤4:利用互联网通过ar技术的api接口与云端服务器的图像识别引擎对接，实时传输采集的现实影像。

步骤5:将采集的现实影像进行截帧,进行影像预处理，完成去噪处理与图像优化。

步骤6:进行对象识别与边缘提取，利用图像模型捕捉画面中的对象及轮廓，并且进行对象特征点的提取和标识。

步骤7:机器学习模块：利用数千张风险源图片作为训练数据源，对几何特征、颜色、行为状态及物理属性作为特征，对应输出变量设为风险源的类型，利用cnn神经网络对全体训练库中数据进行分类和回归分析，得出预设特征和输出变量的相关性模型。

步骤8:，为相关性模型设定阈值，设定相似度判定条件“若相似度>＝80％，则返回值为风险，否则为无风险。”

步骤9:将提取的特征点传入机器学习模块，用预先风险源图像建立起的机器学习训练库中的相关性模型(预测模型)，进行特征相似度度量匹配若与库中某类风险的特征匹配度达到预设阈值则将现实影像中的识别对象判定为该类风险，否则返回结果为无风险。

步骤10:利用用户实际定位在bim模型中所处的绝对位置，结合ar技术api接口的目标追踪算法，用3d引擎渲染被摄物体上的欲展示的关联信息，并且把增加的虚拟信息姿态根据估计出的实际对象的姿态矩阵进行变换，实现虚拟与真实物体的联动，实现增强现实的体验。

步骤11:若当前视角中存在风险，利用bim可视化模块，叠加显示当前定位及姿态下对应的风险预警信息，提示可采取的建议措施，否则继续返回步骤3。

步骤12:人员读取bim+ar反馈信息，作出反应或动作。

步骤13:系统在辨识到风险源后自动计时，若因人员未做反应或未及时远离风险源导致识别到风险源存在持续时间达到10秒，将以声音警报形式对用户进行持续警告，并自动生成风险警报，通过无线模块上传服务器端，通知现场监控室管理人员。

步骤14：根据人员进一步的动作，反复进行步骤3-13的识别与预警流程。

实施例

首先，选用真实的绝对坐标系进行工程现场bim模型创建，赋予基础的工程实体几何外观信息及需要展示的场地内工程实体及物品附加信息。

假设工作人员在实际施工过程中路经基坑边，视野前存在未封闭的围挡结构。此时人员可能受现场机械运作、人员交流、环境杂乱等因素，注意力不在围挡结构上，从而可能会从未封闭围挡结构中从高处坠落，因这个风险源造成生成安全事故。

然而，运用bim、ar与机器视觉技术，可以提供快速自动辅助风险源识别与预警技术。现场人员利用移动设备的摄像头采集现实影像，定位模块和陀螺仪辅助采集用户位置与姿态。在现场作业时，移动设备进行持续运作，实时捕捉定位信息及视野影像。移动设备利用互联网通过与云端服务器的图像识别引擎对接，传输实时采集的影像。此处，云端服务器能够将采集影像进行截帧,并进行影像预处理，完成去噪处理与图像优化。

服务器内预设机器学习模块：针对“未封闭围挡结构”这一风险源，预先利用数百张未封闭结构图片作为训练数据源，对未封闭围挡结构的基本几何特征、颜色、行为状态及变现出未封闭状态的物理属性作为特征，将这些典型特征对应输出变量设定为【未封闭围挡结构】，利用cnn神经网络对全体训练库中数据进行分类和回归分析，得出预设特征和输出变量的相关性模型。为相关性模型设定阈值，设定相似度判定条件“若相似度>＝80％，则返回值为风险，否则为无风险。”

预设训练库中风险源图片“围挡未封闭”的特征可用特征项集用d1＝d1(p1，p2，…，pn)来表示。

利用前述预处理优化的特征化影像，进行对象识别与边缘提取，利用图像模型捕捉画面中的对象及轮廓，并且进行对象特征点的提取和标识。对象识别，即图像轮廓识别以及对象捕捉方式很多，现有技术中，对图像中的物体的识别技术及方法是比较成熟的，本实施方式中的对象识别及边缘提取方法，采用下述文献中的方法：何苏利.基于轮廓形状和复杂网络的图像识别新方法[d].广东工业大学,2016。实拍影像中的特征集用d2＝d2(p’1，p’2，…，p’n)表示。

在相关性模型中，将d1和d2之间的内容相关度sim用特征集在几何空间坐标下所表示向量之间夹角的余弦值表示，用来判断相似程度。w1k、w2k分别表示d1和d2第k个特征项的权值。

基于现场围挡图像的识别，若其与“围挡未封闭”判断相似性达到80％，则判定为存在该类风险源。此处涉及的ar技术api接口的目标追踪算法，为现有技术的方法，一些信息科技企业提供的接口可直接应用于开发实现该算法，例如下述文献的内容：王宇希,张凤军,刘越.增强现实技术研究现状及发展趋势[j].科技导报,2018,36(10):75-83。利用用户实际定位在bim模型中所处的绝对位置，结合ar技术api接口的目标追踪算法，用3d引擎渲染围挡数字模型的名称及参数信息，叠加显示当前定位及姿态下对应的风险预警信息“存在【未封闭围挡结构】风险源”，提示可采取的建议措施“请远离【未封闭围挡结构】”，并且根据估计出的实际对象的姿态，对该对象的虚拟信息姿态进行刚体空间坐标变换，并将这一变换后所展现的模型图像发送给移动设备，使得用户得以观察到风险特征，以实现虚拟与真实物体的联动，实现增强现实的体验。

姿态变换的原理如下：把增加的虚拟信息姿态根据估计出的实际对象的姿态进行刚体空间坐标变换，实现虚拟与真实物体的联动，实现增强现实的体验。具体空间姿态变换矩阵如下：

上式为刚体平动变换矩阵，其中vx、vy、vz表示在三维空间x,y,z三个方向上的平移量。

上式为刚体绕x、y、z轴旋转变换矩阵，其中θ表示在三维空间绕x,y,z三个方向上的旋转角度。由上述的刚体平动变换矩阵和x、y、z轴旋转变换矩阵得出

系统在辨识到未封闭的围挡结构后自动计时，现场人员读取bim+ar反馈信息，可根据提示作出反应或动作，若因人员未做反应或未及时远离风险源导致识别到风险源存在持续时间达到10秒，将以声音警报形式对用户进行持续警告，并自动生成风险警报，通过无线模块上传服务器端，通知现场监控室管理人员，相关警报数据在服务器中保存，为后期人员安全教育、责任追究等提供数据支持。

移动端保持持续运作，循环识别各类风险源并提供人员安全预警。

技术特征：

技术总结

本发明涉及工程建造技术领域，具体来说是一种基于bim与ar技术的可视化风险辨识方法及设备bim ar，通过移动端采集用户位置及用户位置处的现实影像以实时上传至后台客户端，并接受客户端所发出的反馈信息。通过后台客户端对现场进行BIM建模并实时接收移动端所采集的用户位置及用户位置处的现实影像，对现实影像进行特征识别以与预设的风险类型库进行特征相似度匹配，并向移动端发出包括BIM模型图像的反馈信息。本发明同现有技术相比，其优点在于：利用BIM与AR技术提供可视化风险辨识方案，直观快速的对风险特征进行辨识，将风险信息与预设建议的应对措施反馈给用户，第一时间告知用户，提供有力的决策支持，提升工程现场安全水平。

技术研发人员：翟昌骏;唐俊;谢雄耀;姚松柏;朱文杰;张久昌;郭乐

受保护的技术使用者：中铁上海工程局集团有限公司

技术研发日：2018.08.27

技术公布日：2019.03.26

一种用于bim运维阶段的火灾报警装置的制造方法

一种用于bim运维阶段的火灾报警装置的制造方法

【专利摘要】本实用新型创造提供了一种用于BIM运维阶段的火灾报警装置，包括报警系统和BIM三维模型信息组件，所述报警系统包括温度传感器和烟雾传感器，所述温度传感器和烟雾传感器与所述BIM三维模型信息组件信号连接，所述温度传感器和所述烟雾传感器位于消防架上，所述消防架包括底架和固定于所述底架两侧的侧架，所述侧架上方设有上挡板，所述底架上设有灭火器框。本实用新型创克服现有技术的不足，能够更有效，更直观的反映出建筑火情，又能够容纳多种消防用设备，实用性强。

【专利说明】

一种用于BIM运维阶段的火灾报警装置

技术领域

[0001]本发明创造属于消防领域，尤其是涉及一种用于WM运维阶段的火灾报警装置。

【背景技术】

[0002]BIM的全程是 ，也就是建筑信息模型，它是以建筑工程项目的各项相关信息数据作为模型的基础，进行建筑模型的建立，通过数字信息仿真模拟建筑物所具有的真实信息。它具有可视化一种用于bim运维阶段的火灾报警装置的制造方法，协调性，模拟性，优化性和可出图性五大特点。

[0003]消防是社会公众场所，尤其是商场、酒店、超市等场所必须面对的一个重要问题，现阶段，普通的消防架已经被广泛的应用于各个公众场所，但是，随着信息化的普及，需要改进的消防装置来进一步防范火灾或在火灾出现后能够及时作出响应。而BIM相应的应用软件已经被广泛使用，将其应用于建筑工程后期的管理维护工作也逐渐成熟，但是，将其与消防架结合来实现及时的响应同时又能够起到实际消防作用的装置尚未见报道。

【发明内容】

[0004]有鉴于此，本发明创造旨在提出一种用于B頂运维阶段的火灾报警装置，以克服现有技术的不足，能够更有效，更直观的反映出建筑火情，又能够容纳多种消防用设备，实用性强。

[0005]为达到上述目的，本发明创造的技术方案是这样实现的:

[0006]一种用于B頂运维阶段的火灾报警装置，包括报警系统和三维模型信息组件，所述报警系统包括温度传感器和烟雾传感器，所述温度传感器和烟雾传感器与所述BIM三维模型信息组件信号连接，所述温度传感器和所述烟雾传感器位于消防架上，所述消防架包括底架和固定于所述底架两侧的侧架，所述侧架上方设有上挡板，所述底架上设有灭火器框。

[0007]进一步的，所述底架为一水平板，所述灭火器框搁置在所述底架上，所述灭火器框的尺寸与市售的手提式泡沫灭火器的尺寸匹配，优选的所述灭火器框可容纳两个手提式泡沫灭火器，所述灭火器框的总个数为2个。

[0008]进一步的，所述温度传感器和所述烟雾传感器安装于所述上挡板的上端面上，所述温度传感器和所述烟雾传感器可快速感应周围温度和烟雾情况，并且将两者设于所述消防架上，位置灵活，拆卸方便。

[0009 ]进一步的，所述侧架上固定有上横梁和中横梁，所述上横梁与所述侧架焊接连接，所述中横梁与所述侧架焊接连接。

[0010]进一步的，所述上横梁上设有挂钩，所述挂钩有3-8个，所述挂钩在所述上横梁上水平均匀阵列，所述挂钩可用于挂设消防用湿巾、毛巾等。

[0011]进一步的，所述中横梁上固定有若干置物筐，所述置物筐的数量为3-5个，所述置物筐在所述中横梁上水平均匀阵列，所述置物筐内可放入毛巾、矿泉水等消防物件。

[0012]进一步的，所述灭火器框的前侧面的高度小于所述灭火器框的后侧面的高度，这样设置的原因是方便灭火器的存取，由于灭火器质量较大，因此，选择框体作为容纳灭火器的容器，更稳固，不易被碰倒。

[0013]进一步的，将本发明创造所述的火灾报警装置放置在易发生火灾的人群密集场所，将所述温度传感器和所述烟雾传感器与所述B頂三维模型信息组件信号连接，当发生火情时，传感器感知到的信号传输至所述B頂三维模型信息组件中，在计算机上可显示出具体火情发生的位置，便于安保和监控人员快速做出反应，也便于快速疏散人群。

[0014]相对于现有技术，本发明创造具有以下优势:

[0015](I)可容纳多种消防装置或物件，实用性强。

[0016](2)便于直观观察火灾位置，以便快速做出响应，更有效地帮助人群逃生。

【附图说明】

[0017]构成本发明创造的一部分的附图用来提供对本发明创造的进一步理解，本发明创造的示意性实施例及其说明用于解释本发明创造，并不构成对本发明创造的不当限定。在附图中:

[0018]图1为本发明创造实施例立体结构示意图；

[0019]图2为本发明创造实施例主视方向结构示意图；

[0020]图3为本发明创造实施例侧视方向结构示意图；

[0021]附图标记说明:

[0022]1-底架;2-侧架;3-上挡板;4-灭火器框;5-置物筐;6_挂钩;7_上横梁;8_温度传感器;9-烟雾传感器;10-灭火器，10-中横梁，11-灭火器。

【具体实施方式】

[0023]需要说明的是，在不冲突的情况下，本发明创造中的实施例及实施例中的特征可以相互组合。

[0024]在本发明创造的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明创造和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明创造的限制。此外，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”等的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明创造的描述中，除非另有说明，“多个”的含义是两个或两个以上。

[0025]在本发明创造的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接;可以是机械连接，也可以是电连接;可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以通过具体情况理解上述术语在本发明创造中的具体含义。

[0026]下面将参考附图并结合实施例来详细说明本发明创造。

[0027]一种用于B頂运维阶段的火灾报警装置，包括报警系统和BM三维模型信息组件，所述报警系统包括温度传感器8和烟雾传感器9，所述温度传感器8和烟雾传感器9与所述B頂三维模型信息组件(图中未示出)信号连接，所述温度传感器8和所述烟雾传感器9位于消防架上，所述消防架包括底架I和固定于所述底架I两侧的侧架2，所述侧架2上方设有上挡板3，所述温度传感器8和所述烟雾传感器9安装于所述上挡板3的上端面上，所述底架I上设有灭火器框4，所述灭火器框4的前侧面的高度小于所述灭火器框4的后侧面的高度考证培训机构，所述底架I为一水平板，所述灭火器框4搁置在所述底架I上bim运维阶段，所述侧架2上固定有上横梁7和中横梁10，所述上横梁7与所述侧架2焊接连接，所述中横梁10与所述侧架2焊接连接，所述上横梁7上设有挂钩6，所述挂钩6有6个，所述挂钩6在所述上横梁7上水平均匀阵列，所述中横梁10上固定有若干置物筐5，所述置物筐5的数量为4个，所述置物筐5在所述中横梁10上水平均匀阵列。

[0028]以上所述仅为本发明创造的较佳实施例而已，并不用以限制本发明创造，凡在本发明创造的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明创造的保护范围之内。

【主权项】

1.一种用于BM运维阶段的火灾报警装置，包括报警系统和BIM三维模型信息组件，其特征在于:所述报警系统包括温度传感器和烟雾传感器，所述温度传感器和烟雾传感器与所述B頂三维模型信息组件信号连接，所述温度传感器和所述烟雾传感器位于消防架上，所述消防架包括底架和固定于所述底架两侧的侧架，所述侧架上方设有上挡板，所述底架上设有灭火器框。2.根据权利要求1所述的一种用于BIM运维阶段的火灾报警装置，其特征在于:所述底架为一水平板，所述灭火器框搁置在所述底架上。3.根据权利要求1所述的一种用于BIM运维阶段的火灾报警装置，其特征在于:所述温度传感器和所述烟雾传感器安装于所述上挡板的上端面上。4.根据权利要求1所述的一种用于BIM运维阶段的火灾报警装置，其特征在于:所述侧架上固定有上横梁和中横梁，所述上横梁与所述侧架焊接连接，所述中横梁与所述侧架焊接连接。5.根据权利要求4所述的一种用于BIM运维阶段的火灾报警装置，其特征在于:所述上横梁上设有挂钩，所述挂钩有3-8个，所述挂钩在所述上横梁上水平均匀阵列。6.根据权利要求4所述的一种用于BIM运维阶段的火灾报警装置，其特征在于:所述中横梁上固定有若干置物筐，所述置物筐的数量为3-5个，所述置物筐在所述中横梁上水平均匀阵列。7.根据权利要求1所述的一种用于BIM运维阶段的火灾报警装置，其特征在于:所述灭火器框的前侧面的高度小于所述灭火器框的后侧面的高度。

【文档编号】/

【公开日】2016年8月17日

【申请日】2015年12月31日

【发明人】邢忠桂

【申请人】百川伟业（天津）建筑科技股份有限公司