写作背景
我们正在从信息化时代迈向数字化、智能化时代。在数字化时代,数据与土地、劳动力、资本、技术被并列为五大生产要素。数据已经成为企业最宝贵的资源之一,而数据治理作为管理和优化数据资产的关键领域,对于企业成功实现从“流程驱动”到“数据驱动”来说至关重要。
随着技术的迅猛发展和互联网的普及,企业面临着前所未有的数据洪流。大数据、云计算、人工智能、ChatGPT、大模型、AIGC等新技术的涌现,在为企业提供更多的数据分析和应用方式的同时,也带来了更多的挑战。数据治理并非一项简单的技术挑战,而是一项跨部门、跨业务的组织变革任务,需要跨越组织边界整合各种技术和业务要求,并与企业战略紧密结合。在这个数据爆炸的时代,如何从海量的数据中准确获取所需信息,成为企业管理和决策的关键问题。
数据治理作为一种全面的管理和治理方法,针对数据的质量、安全、合规性等方面进行规范与控制,以确保数据的可信性及有效性。在数字化时代,数据治理的重要性愈发凸显。一个有效的数据治理系统不仅可以提高企业对数据的价值利用,还可以优化业务流程、支持决策分析、降低风险,从而为企业创造更高的价值。
然而,数据治理并非一蹴而就的简单过程。从数据处理的技术层面来说,它涉及多个方面,包括数据采集、存储、加工、传输、分析等各个环节。与此同时,要获得良好的数据治理效果,就不能单纯考虑技术方面,还需要综合考虑与之相关的组织机构、管理制度、数据标准、流程规范等多种因素。而且,不同行业和企业所处的不同发展阶段,使企业对数据治理的核心需求也存在差异。因此,制定符合自身需求的数据治理平台规划成为企业进行数据治理的一项关键任务。
有感于某些朋友及客户的反馈,很多数据治理相关资料写得过于专业,看的时候觉得每个字都认识,好像也看懂了,然而合上书本之后,真正在实际开展项目时依旧有很多的困惑。笔者的写作初衷是希望本书可以更侧重于实践落地过程,探讨工作步骤、具体任务执行难点和应对策略,结合笔者多年数字化转型咨询、数据治理咨询及数据智能化项目落地实施经验,分享方法理论、软件工具、行业实践案例和经验教训,帮助读者更好地理解数据治理的挑战和机遇,并在实际工作中有效地应用敏捷数据治理方法。
当前,金融行业的数据管理成熟度比较高。金融行业监管严格,而且IT预算充裕。在政策的大力推动之下,电信、油田、电力、政务等领域开展了很多的数据标准建设项目,数据管理成熟度也明显高于其他领域。这些行业的数据治理项目比较重视完善的顶层设计规划,会采用招投标方式寻找与外部数据治理咨询服务公司的合作机会,投资规模也相当大。
本书希望通过敏捷数据治理平台建设方法的介绍,让更多身处充分竞争领域(如制造业、消费品、大健康、服务业等)的企业能够以更低成本、更高成功率开展数据治理。这些企业的预算少、事务多,对于投入产出比十分敏感,初期投入谨慎,且非常关注数据治理项目如何赋能业务、创造价值。面向金融企业的那种大而全、重规划、高投入、细粒度的数据治理方法,并不太适合那些处于野蛮成长阶段的对成本敏感、看重性价比的企业。
本书的编写正是基于这样的写作背景。笔者希望通过结合实际案例和自己的经验,为广大读者提供一份实用的数据治理指南,帮助读者解决数据治理工作中所遇到的难题,使读者掌握数据治理项目开展过程中的全局性思维和核心能力。
学习建议
数据治理是一门综合性的学科,可能会让初学者感到有些复杂和深奥。然而,只要保持学习的态度和耐心,每个人都可以掌握数据治理的核心知识和技能。笔者建议读者在阅读本书的过程中,多加思考和实践,结合自己的工作场景,深入理解数据治理的理念,并将其运用到实际工作中。
本书侧重于实践,读者在阅读过程中可以通过目录快速浏览本书的主要章节,根据需要优先阅读最感兴趣的章节内容。如果读者想要了解数据治理的核心知识,则可以优先阅读第3章和第4章;如果读者对与数据治理相关的技术工具比较感兴趣,则可以阅读第6章。
有一定基础的读者,可以结合手里的其他数据治理相关资料进行主题式阅读。比如,找出多本有关主数据的图书,对比阅读与主数据相关的内容。当然,有时间的读者可以多花一些时间思考一下本书第2章中敏捷数据治理方法论的底层构建原理,了解如何从一个范围模糊、数据需求各异的数据治理项目中,通过结构化的方式提炼出共性和管控的关键要点,并设计有序的操作步骤、总结出系统化的方法论。
数据治理是一个不断演进、跨学科的领域,综合性很强,只有坚持不懈地学习和探索,才能在实践中逐步成长。“独学而无友,则孤陋而寡闻”,笔者希望本书能成为大家的良师益友,为大家在数据治理的道路上提供一些有益的指导和启示,也欢迎大家跟笔者交流探讨。
本书特色
本书是一份数据治理实践指南,可以帮助读者深入了解数据治理的核心概念、方法、工具和实践。本书系统性地介绍了敏捷型数据治理平台的建设方法,从数据治理体系规划到实施策略,从组织架构到技术工具,从方法体系到场景实操,帮助读者构建可持续的敏捷数据治理框架体系,使读者在数据治理的道路上走得更顺畅。
本书不追求面面俱到、不贪大求全,只是试图讲透数据治理所有的细节。本书也不是单一地论述数据标准或主数据等某一个话题,毕竟仅仅针对银行业的数据标准如何确定,也可以专门写成一本非常厚的专业图书。本书将从“道”“术”“器”的角度深入探讨数据治理实践过程中的理论、方法、工具等核心要素,包括数据治理组织、管理制度、流程规范、数据标准管理、数据质量管理、元数据管理、主数据管理、数据安全与隐私等话题。
数据治理是一门实践中的学问。本书轻理论、重实践,通过案例场景细节解读和工作步骤阐述,帮助读者将数据治理理论转化为切实可行的解决方案和实际行动策略。无论你是数据管理专家、企业决策者、数据治理从业者还是对数据治理感兴趣的人士,本书都将成为你在数据治理领域的伙伴和指南,为你的数据治理之旅提供支持及指引,助力你在数据治理领域少走弯路。
本书共9章。第1章介绍数据治理的背景和基础知识;第2章介绍敏捷数据治理方法论;第3章至第5章介绍敏捷数据治理平台的技术规划、核心功能设计、项目落地实施等方面的知识;第6章介绍数据治理技术工具,以及相关开源软件产品、商业软件产品的特点等;第7章至第9章介绍数据治理不同场景的案例,从应用、技术和业务等不同角度,深入分析具体案例实践中的难点及应对策略。