本发明涉及数据指标管理,特别涉及煤矿指标管理配置方法及系统。
背景技术:
1、目前,煤矿运营是一个复杂的行业,涉及生产、安全、环境、设备管理等多个关键方面。为了有效地管理和监测煤矿运营,必须跟踪和分析多个关键性能指标。这些指标通常来自不同数据源,包括传感器、数据库、监控系统等,导致了数据的分散性和不一致性。
2、已有的数据管理和分析实现方案通常采用传统的数据关联和数据清洗方法,其中包括:
3、1、数据分析人员手工进行数据清洗、字段标准化和关联。这涉及大量的人工工作,容易出现错误,而且非常耗时。
4、2.有些可能会开发自己的定制脚本来进行数据关联和清洗。这对用户编程技能要求较高,且通常需要不断调整来适应新的数据源和字段。
5、综上,已有的处理煤矿指标的属性字段关联配置的实现方案时,存在人工成本高、适应性低、编程要求高等问题。这些问题需要一种更智能、自动化的方法来解决。
6、因此,本发明提出煤矿指标管理配置方法及系统。
技术实现思路
1、本发明提供煤矿指标管理配置方法及系统,用以通过对来自多个数据源的多个煤矿指标数据表中的所有标准化煤矿指标之前的关联关系的分析,搭建出可以从宏观角度表示其关联关系的标准化煤矿指标之间的关联关系的图谱,并通过对煤矿指标关联详细图谱中的量化关系指标组合中的完整关联关系进行系数量化以及区分关联配置依据和验证量化关系,保证了对来自不同数据源的煤矿指标的关联配置的精准性,此方法人工参与度少,对新数据源的煤矿指标数据表的适应性也高,且对使用者无编程要求。
2、本发明提供一种煤矿指标管理配置方法,包括:
3、s1:基于来自多个数据源的多个煤矿指标数据表中的所有标准化煤矿指标之间的第一关联关系,搭建出煤矿指标关联图谱;
4、s2:基于历史配置实例和人工智能算法,分析出所有标准化煤矿指标之间的第二关联关系;
5、s3:基于所有标准化煤矿指标之间的第二关联关系,对煤矿指标关联图谱进行局部细化,获得煤矿指标关联详细图谱;
6、s4:对煤矿指标关联详细图谱中的量化关系指标组合中的完整关联关系进行系数量化,获得量化关系指标组合中的完整关联关系的完整关联系数;
7、s5:基于所有量化关系指标组合中的完整关联关系的完整关联系数,确定出所有煤矿指标数据表的关联配置依据和验证量化关系;
8、s6:基于所有煤矿指标数据表的关联配置依据和验证量化关系,获得煤矿指标管理配置结果。
9、优选的,煤矿指标管理配置方法,s1:基于来自多个数据源的多个煤矿指标数据表中的所有标准化煤矿指标之间的第一关联关系,搭建出煤矿指标关联图谱,包括:
10、获取来自多个数据源的煤矿指标数据表,并确定出所有煤矿指标数据表中每个煤矿指标的属性信息;
11、对每个煤矿指标的属性信息进行清洗,获得每个煤矿指标的有效属性信息;
12、基于所有煤矿指标数据表中的每个煤矿指标的有效属性信息,对所有煤矿指标数据表中的每个煤矿指标进行标准化处理,获得所有标准化煤矿指标和每个标准化煤矿指标的标准化属性信息;
13、基于所有标准化煤矿指标的标准化属性信息,对所有标准化煤矿指标进行初次关联,获得所有标准化煤矿指标之间的第一关联关系;
14、基于所有标准化煤矿指标之间的第一关联关系,搭建出煤矿指标关联图谱。
15、优选的,煤矿指标管理配置方法,基于所有标准化煤矿指标的标准化属性信息,对所有标准化煤矿指标进行初次关联,获得所有标准化煤矿指标之间的第一关联关系,包括:
16、搭建出所有标准化煤矿指标中,标准化属性信息完全一致的至少两个标准化煤矿指标之间的关联关系,作为第一子关联关系;
17、将所有标准化煤矿指标中,标准化属性信息中除字段含义以阶梯式变化以外剩余的所有子属性信息完全一致的标准化煤矿指标汇总为同类指标集合,获得多个同类指标集合;
18、基于存在量化关系的至少两个同类指标集合之间的量化关系,确定出所有第二子关联关系;
19、将所有第一子关联关系和第二子联关系当作所有标准化煤矿指标之间的第一关联关系。
20、优选的,煤矿指标管理配置方法,基于存在量化关系的至少两个同类指标集合之间的量化关系,确定出所有第二子关联关系,包括:
21、将所有同类指标集合输入至量化关系识别模型,获得所有存在量化关系的至少两个同类指标集合之间的量化关系;
22、搭建出所有属于存在量化关系的至少两个同类指标集合的、且满足对应量化关系至少两个标准化煤矿指标之间的关联关系,作为所有第二子关联关系。
23、优选的,煤矿指标管理配置方法,s2:基于历史配置实例和人工智能算法,分析出所有标准化煤矿指标之间的第二关联关系,包括:
24、基于历史配置实例和人工智能算法,搭建出关联关系识别模型,其中,历史配置实例包含不同于当前所有标准化煤矿指标的大量煤矿指标以及所有煤矿指标之间存在的第二关联关系;
25、将所有标准化煤矿指标输入至关联关系识别模型,获得所有标准化煤矿指标之间的第二关联关系。
26、优选的,煤矿指标管理配置方法,s4:对煤矿指标关联详细图谱中的量化关系指标组合中的完整关联关系进行系数量化,获得量化关系指标组合中的完整关联关系的完整关联系数,包括:
27、在煤矿指标关联详细图谱中确定出存在量化关系的标准化煤矿指标组合,作为量化关系指标组合;
28、判断出煤矿指标关联详细图谱中的相邻标准化煤矿指标之间的关联关系是否为对应的相邻标准化煤矿指标为相同煤矿指标,若是,则将对应的相邻标准化煤矿指标之间的关联系数设置为1;
29、否则,基于对应的相邻标准化煤矿指标之间的关联关系中的量化计算过程中的计算层次,检索预设的量化计算层次-关联系数列表,获得对应的相邻标准化煤矿指标之间的关联系数;
30、基于每组相邻标准化煤矿指标之间的关联系数,对量化关系指标组合中的完整关联关系进行系数量化,获得量化关系指标组合中的完整关联系数。
31、优选的,煤矿指标管理配置方法,基于每组相邻标准化煤矿指标之间的关联系数,对量化关系指标组合中的完整关联关系进行系数量化,获得量化关系指标组合中的完整关联系数,包括:
32、确定出量化关系指标组合中的完整关联关系中的间接关联次数;
33、将量化关系指标组合中的完整关联关系中包含的所有组相邻标准化煤矿指标之间的关联系数之和,与对应间接关联次数之商,当作量化关系指标组合中的完整关联系数。
34、优选的,煤矿指标管理配置方法,s5:基于所有量化关系指标组合中的完整关联关系的完整关联系数,确定出所有煤矿指标数据表的关联配置依据和验证量化关系,包括:
35、将所有完整关系系数大于系数阈值的完整关联关系当作所有煤矿指标数据表的关联配置依据;
36、将所有完整关系系数不大于系数阈值的完整关联关系当作所有煤矿指标数据表的验证量化关系。
37、优选的,煤矿指标管理配置方法,s6:基于所有煤矿指标数据表的关联配置依据和验证量化关系,获得煤矿指标管理配置结果,包括:
38、s601:基于所有煤矿指标数据表的关联配置依据对所有标准化煤矿指标进行关联校正,获得所有校正煤矿指标;
39、s602:判断出所有校正煤矿指标是否符合所有煤矿指标数据表的验证量化关系,若是,则基于关联配置依据对所有校正煤矿指标进行关联配置,获得煤矿指标管理配置结果,否则,将所有煤矿指标数据表的验证量化关系中,所有校正煤矿指标不符合的完整关联关系与当前所有煤矿指标数据表的关联配置依据合并,获得最新的关联配置依据,同时,将当前所有煤矿指标数据表的验证量化关系中,所有校正煤矿指标不符合的所有完整关联关系剔除,获得最新的验证量化关系;
40、s603:基于最新的关联配置依据和最新的验证量化关系,循环执行步骤s601至s602,获得所有最新的校正煤矿指标,直至所有最新的校正煤矿指标符合最新的验证量化关系时,则基于最新的关联配置依据对所有最新的校正煤矿指标进行关联配置,获得煤矿指标管理配置结果。
41、本发明提供一种煤矿指标管理配置系统,用于执行实施例1至9中任一一种所述的煤矿指标管理配置方法,包括:
42、图谱生成模块,用于基于来自多个数据源的多个煤矿指标数据表中的所有标准化煤矿指标之间的第一关联关系,搭建出煤矿指标关联图谱;
43、关系分析模块,用于基于历史配置实例和人工智能算法,分析出所有标准化煤矿指标之间的第二关联关系;
44、图谱细化模块,用于基于所有标准化煤矿指标之间的第二关联关系,对煤矿指标关联图谱进行局部细化,获得煤矿指标关联详细图谱;
45、系数量化模块,用于对煤矿指标关联详细图谱中的量化关系指标组合中的完整关联关系进行系数量化,获得量化关系指标组合中的完整关联关系的完整关联系数;
46、关系分类模块,用于基于所有量化关系指标组合中的完整关联关系的完整关联系数,确定出所有煤矿指标数据表的关联配置依据和验证量化关系;
47、配置校正模块,用于基于所有煤矿指标数据表的关联配置依据和验证量化关系,获得煤矿指标管理配置结果。
48、本发明相对于现有技术产生的有益效果为:通过对来自多个数据源的多个煤矿指标数据表中的所有标准化煤矿指标之前的关联关系的分析,搭建出可以从宏观角度表示其关联关系的标准化煤矿指标之间的关联关系的图谱,并通过对煤矿指标关联详细图谱中的量化关系指标组合中的完整关联关系进行系数量化以及区分关联配置依据和验证量化关系,保证了对来自不同数据源的煤矿指标的关联配置的精准性,此方法人工参与度少,对新数据源的煤矿指标数据表的适应性也高,且对使用者无编程要求。
49、本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在本技术文件中所特别指出的结构来实现和获得。
50、下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
1.煤矿指标管理配置方法,其特征在于,包括:
2.根据权利要求1所述的煤矿指标管理配置方法,其特征在于,s1:基于来自多个数据源的多个煤矿指标数据表中的所有标准化煤矿指标之间的第一关联关系,搭建出煤矿指标关联图谱,包括:
3.根据权利要求2所述的煤矿指标管理配置方法,其特征在于,基于所有标准化煤矿指标的标准化属性信息,对所有标准化煤矿指标进行初次关联,获得所有标准化煤矿指标之间的第一关联关系,包括:
4.根据权利要求3所述的煤矿指标管理配置方法,其特征在于,基于存在量化关系的至少两个同类指标集合之间的量化关系,确定出所有第二子关联关系,包括:
5.根据权利要求1所述的煤矿指标管理配置方法,其特征在于,s2:基于历史配置实例和人工智能算法,分析出所有标准化煤矿指标之间的第二关联关系,包括:
6.根据权利要求1所述的煤矿指标管理配置方法,其特征在于,s4:对煤矿指标关联详细图谱中的量化关系指标组合中的完整关联关系进行系数量化,获得量化关系指标组合中的完整关联关系的完整关联系数,包括:
7.根据权利要求6所述的煤矿指标管理配置方法,其特征在于,基于每组相邻标准化煤矿指标之间的关联系数,对量化关系指标组合中的完整关联关系进行系数量化,获得量化关系指标组合中的完整关联系数,包括:
8.根据权利要求1所述的煤矿指标管理配置方法,其特征在于,s5:基于所有量化关系指标组合中的完整关联关系的完整关联系数,确定出所有煤矿指标数据表的关联配置依据和验证量化关系,包括:
9.根据权利要求1所述的煤矿指标管理配置方法,其特征在于,s6:基于所有煤矿指标数据表的关联配置依据和验证量化关系,获得煤矿指标管理配置结果,包括:
10.煤矿指标管理配置系统,其特征在于,用于执行权利要求1至9中任一一种所述的煤矿指标管理配置方法,包括: