为何精准实时数据对业务成功至关重要
获取精准实时数据对业务至关重要。需通过元数据识别模式、通过元数据文件分组信息、通过元数据管理框架确保元数据准确性。
将实时数据准确性——指正确数值和格式的数据质量特征——视为盈利增长业务必需。公司需精准实时数据应对消费者需求激增。三分之一C-suite高管和财务专业人士同意越来越重视实时财务数据。
不幸的是,许多组织仍难从实时数据获取业务洞察。公司收集小时级流数据但可能只需几分钟流做好决策。
甚至决定如何验证积累数据量也导致挑战,难快速判断一数据集是否比另一更准。判断失误可导致企业损失1400万美元。
幸运的是,元数据——关于数据的数据——承诺助力实现实时数据准确性。本文将引导读者用元数据踏上实时数据准确性之旅。
用元数据验证实时数据准确性
似反直觉:生成更多数据帮助保持现有数据准确。但元数据有几大超能力:
- 若准确,元数据提供其描述信息上下文,证明数据准确。计算机程序可将此元数据转为模式或表征。
- 元数据定义包含技术、业务、运营描述任意组合。所以系统、流程、人可用元数据刻画客户、采购、产品、位置等。
- 算法可用技术元数据标记另一流程或人采取进一步行动。
- 元数据可包裹海量数据块,使数据更易查找。
两专家Romero和Calders利用这些元数据优势提出称作信息剖析方法。提议应用元数据形成剖析模式、再用元数据封闭结果的框架。
推进这些发现,公司可用业务规则指导元数据模式形成、用元数据包裹分组数据包。这些组织将有更高效方式处理实时数据,雇佣算法寻找数据模式、检索匹配数据集。
探索实时数据准确性实例
元数据用于实时数据准确性在现实中何种面貌?Babson College的Gordon和Shankaranarayanan提供洞见。
假设公司A信源每小时涌入数百即时消息。客户John Doe发短信想从公司A买自行车。公司A想验证消息来自John Doe且他想买车。
首先,应用创建John Doe档案——关于John Doe元数据。设John Doe元数据基于电话号码、使用手机类型、公司A会员状态等值。此John Doe表征质量取决于公司A客户关系管理系统所含数据。
然后计算机程序拿John Doe档案匹配信源流入文本,业务规则定义数据流中找什么。软件见匹配John Doe模式数据,将其捆绑在内容元数据文件下。若元数据质量满足业务需求,此内容元数据文件可被人搜索,确信短信来自John Doe。
此外,算法组装购买档案确定John Doe买车可能性,如Amazon如何为客户推荐产品。然后算法应用购买档案权衡John想买车可能性。
使元数据准确性关键
注意用元数据创建模式和批次高度依赖元数据准确性。否则确保实时数据准确性不可能。
上例中,若John Doe换了电话号码元数据仍存旧号,则John元数据不准。同样,含实时数据集元数据文件需正确标记。若John Doe文本文件元数据有错客户名,人找不到John文本文件。
所以,公司用监控数据、清洗数据持续交付高数据质量的同等理由和流程,也适用于元数据。用于验证实时的元数据必须充分准确,才能对实时数据准确性有信心。
元数据管理框架
仅自动化元数据监控清洗够吗?不够。获得足够对业务有价值可访问的元数据质量,依赖元数据管理框架。
组织人员、流程、技术构成此元数据管理框架及创建它的业务规则。
例如,一部门在一系统标准化客户名,另部门在别应用不同格式化客户名,则元数据管理框架摇摇欲坠。组织取哪部门元数据用?
开发元数据管理框架确保充分实时数据准确性需:
- 现有结构及其影响的元数据管理评估。从此基线,公司弄清改什么流程。
- 数据战略,用数据维持业务运转增长计划。
- 数据治理,协调元数据访问和安全、保持合规项目。
- 集体数据素养,关于元数据在决定实时数据准确性中重要性和价值。此外,员工需知如何定义好元数据。
- 可靠业务需求,关于什么属性和值定义元数据描述对象。
结束语
2020年公司见为何需实时数据质量,却不信任从中获业务洞察。高数据量和速度给业务快速保证每条数据在文本或消息流中准确性设重大障碍。
用元数据模式和业务规则策展实时数据,在节省公司分析无关数据资源前提下获更多价值。用元数据分块和标记这些数据集,让找准确数据更快。但这样用元数据要求准确元数据和充分元数据管理结构,让业务信任其实时数据准确性。
物联网技术