基于Data Fabric的多模数据管理方法

摘要

随着政府和企业在信息化向数字化演进历程中信息化程度的加深,各类应用系统生成的数据日益多模化、多源化、海量化,这对数据管理造成了新的挑战.为了解决这些挑战,数据管理领域涌现出了许多新的技术和理念,其中Data Fabric (数据编织)便是一种新兴的数据管理技术和方法,它将分布式数据存储、处理和应用整合为一个整体,并提供了一套可视化的接口进行管理.本文首先分析了Data Fabric的技术架构、技术特点、技术价值和对多模数据进行管理与应用的完整流程.其次,提出了基于时序指标的多模多源数据的异常监测方法、基于日志数据的多模多源数据的异常监测方法,它们通过Data Fabric技术的使用,处理速度分别提高了33.3%和42.2%, F1-score分别提高12.2个和14.8个百分点,进一步说明了Data Fabric技术和本文新提出方法的高效性和应用价值.

关键词

Data Fabric / 多模数据管理 / 数据虚拟化