原文:
www.kdnuggets.com/2023/01/tapping-potential-data-products-2023.html
图片由 rawpixel.com 提供,来自 Freepik
1. 谷歌网络安全证书 - 快速进入网络安全职业轨道。
2. 谷歌数据分析专业证书 - 提升你的数据分析技能
3. 谷歌 IT 支持专业证书 - 支持你的组织进行 IT 管理
根据 福布斯,使用大数据洞察的公司平均收入增加约 44% —— 识别需要关注的客户需求,并在恰当的时间服务于他们。企业相信数据的价值并开始收集数据,但业务用户发现很难在需要时找到、使用和定制他们想要的数据。数据和洞察只有在每个数据消费者(内部和外部)能够获取到有意义的数据时,才能改变组织结果。
因此,作为驱动成果的资产,数据已被企业认可,但它们仍然在管理来自不同来源、缺乏标准化和治理的数据方面遇到困难。因此,这会导致未被利用的宝贵数据孤岛(称为数据缺口)。
将数据视为数据产品经理的方式是根据特定功能的需求随时提供数据。企业可以借助数据产品的洞察对齐其目标。简单来说,将数据视为产品意味着 提供的数据可以在团队或客户需要时从组织内的任何多样化来源访问。例如,软件开发团队需要足够且准确的数据来进行应用程序开发。
“数据即产品”概念是从数据集中化(中央仓库或数据湖)到去中心化领域网络的理想转变。这种方法可以提高数据的准确性、可访问性和安全性。
将数据视为产品的做法是企业数据网格的基础构建块。
数据网格是一种灵活的管理数据架构的方法,它促进了去中心化的数据管理和治理。它是一种以领域驱动的数据架构,要求以产品思维来收集每个领域的数据,每个数据的利益相关者都是其数据的拥有者,以提供清晰、有效和可靠的数据产品。因此,组织内的每个利益相关者或团队都采用产品思维,将数据视为产品,确保数据的所有权超越部门,使每个消费者(任何需要数据以便于任何目的或开发的人)都能获取、清洁和充足的数据。
许多企业采用的传统数据提取和集成方法需要与业务需求和用例对齐。多样的数据未能符合必要的治理和质量水平,这限制了企业从数据中获得所需和可持续价值的能力。数据作为产品可以帮助 实现数据资产的最大潜力。
-
精确的数据:数据的最大潜力在于其精确和可信。当数据被视为产品时,各领域的责任确保其管理的数据中包含上下文知识和所需信息。这样,消费者可以根据自己的数据需求自助服务,带来更准确和易于理解的数据,且没有任何延迟。
-
可访问和可消费的数据:当将数据视为产品时,目的是使数据对消费者可访问和可消费。因此,足够的信息可以随时获得。在这种方法中,每个业务领域负责准备自己的数据,并使其对其他人可访问以便于消费。元数据为消费者提供数据上下文,以加速数据发现和访问。
-
安全的数据:虽然数据的轻松访问很重要,但数据治理同样关键。数据作为产品的方法有助于管理和扩展对组织内所有客户的数据访问,包括所有领域。在管理数据作为产品时,涉及适当的访问控制——谁可以查看、使用和导出每个数据产品,并跟踪对任何数据集执行的所有活动。它使组织领域具有全球合规性,并实施必要的政策。
企业需要一个将过量信息视为产品的环境,以维持数据的有效性和质量。为了提供优质的数据,企业需要了解团队的数据需求及数据的生命周期。
充分利用现代数据能力(数据即产品)可能具有挑战性,并且在企业内部带来所有权。 数据中的产品思维确保每个领域的基础分析和历史数据得以保持,以保障数据的背景。
我使用过的平台之一是 K2view 的“数据产品平台”,它提供数据产品的部署、管理和监控,并与现代的“数据即产品”概念相一致。通过为每个数据产品保留元数据,数据产品工作室帮助数据所有者聚合和管理所有业务实体(如客户、产品、位置或任何交易)的数据,并将这些数据进一步准备成集成的数据产品提供给消费者。为了实现企业级的可扩展性、可靠性和灵活性,该平台以原始方式维护并提供每个数据集作为微型数据库。这有助于企业通过改变流入数据与其消费者之间的关系,释放数据驱动洞察的潜力。
随着数据在集中式数据平台(如数据湖或数据仓库)中沉没,需要更多的人力和工具来管理,这在实现业务成果方面已被证明有限。因此,数据网格架构将数据即产品视为赋能每个领域从数据中揭示洞察的新方式。数据即产品的方法在企业的每个层面上提供了一种灵活的数据管理方式,使数据对所有利益相关者更易获取。
Yash Mehta 是国际公认的 IoT、M2M 和大数据技术专家。他撰写了许多广受认可的关于数据科学、物联网、商业创新和认知智能的文章。他是数据洞察平台 Expersight 的创始人。他的文章曾被最权威的出版物刊登,并被 IBM 和 Cisco IoT 部门评选为连接技术行业中最具创新性和影响力的作品之一。