AI模型与大数据分析预测,到2027年将有80%的数据治理项目以失败告终。数据治理究竟难在哪里?专注于通信平台基础设施建设的Orania Limited,通过五层架构体系给出了自己的答案。
数据治理为何屡屡失败
数据治理的核心概念并不复杂:确保数据得到妥善管理、受到合理保护,并以符合平台对用户、合作伙伴和监管机构义务的方式被使用。真正的挑战在于落地执行。
数据治理并非单一问题,而是由数据分类、访问控制、数据质量、生命周期管理和合规监管等相互关联的问题共同构成,每个问题都需要独立的结构设计,同时又必须协同运作。
把数据治理当作一次性实施项目的平台,往往会发现所构建的体系经不起时间考验。而将其视为分层学科来对待的平台,则往往能够构建出真正具备可扩展性的体系。
Gartner曾在2024年预测,到2027年将有80%的数据与分析治理项目宣告失败,主要原因在于缺乏清晰的业务目标。这一现象在Orania Limited的实际工作中也得到了印证:许多平台的治理框架是围绕合规清单设计的,而非围绕平台的真实运营方式和实际保护需求。
Orania Limited认为,数据治理必须嵌入业务运营流程,而非作为一个独立层叠加其上——这不是哲学层面的区别,而是决定框架是真正影响数据处理方式,还是仅仅描述"理想状态"的实质性差异。
第一层:数据分类
所有数据治理框架的起点,都必须是清楚地了解数据的存在形态及其类型。对于持续产生大量用户生成内容、行为数据、交易记录和元数据的通信平台而言,分类工作的难度远超预期。
数据分类是按照敏感程度、监管要求和所需保护级别对数据进行归类的过程。分类失误或跳过这一步,意味着后续所有工作都建立在猜测之上。
Orania Limited的分类工作涵盖三个核心维度:敏感级别(从公开内容到个人身份信息再到机密运营数据)决定了数据在整个生命周期中的处理方式;监管类别决定适用哪些合规要求及执行力度;来源与上下文则决定数据采集时适用的处理规则,以及在用户告知条款下允许的使用范围。
Orania指出,分类层无需在第一天就做到面面俱到,但必须准确且执行一致——分类层面的不一致会向上层层传导,导致整个治理结构越来越难以维护。为此,Orania构建的分类框架会随着平台发展而演进,而非每次数据环境变化时都推倒重建。
第二层:数据访问控制
数据完成分类后,接下来的核心问题是:谁可以访问哪些数据、在什么条件下访问,以及需要什么级别的监督机制。对于以用户数据为产品核心的通信平台而言,这是治理框架中操作敏感性最高的层级之一。
Orania Limited的研究表明,数字平台的信任与安全基础设施在很大程度上取决于内部数据访问的结构化程度——在这一层做得好的平台,在处理用户数据事故时往往更为顺畅。
治理层面的访问控制关注的是内部访问权限:哪些团队、角色和系统可以访问哪类数据,以及这种访问是否与实际工作需要相匹配。
Orania的访问控制设计遵循"最小必要访问"原则:访问权限应严格匹配特定职能的实际需要,不得超出范围。这一模型在执行上比宽松授权更为复杂,但能显著缩小数据风险面,也更便于在监管机构或合作伙伴审查时证明数据处理的合规性。
此外,Orania还内置了定期审查机制,以防止访问权限随时间推移而失效。平台会不断变化,团队会重组,系统会迭代,若不建立定期审查周期,访问控制结构就会悄然与平台实际运营脱节。
第三层:数据质量管理
数据的存在与保护并不足够,若数据不准确、不一致或不适用于目标用途,同样会引发治理问题。数据质量管理层正是为解决这一问题而设,也是大多数治理框架投入不足或处理不当的层级。
从治理角度来看,数据质量管理并不是清洗数据集,而是为不同数据类型和使用场景建立可接受的质量标准,并构建在质量下降演变为下游问题之前及时发现和处理的流程机制。
对于通信平台,数据质量问题通常集中在几个典型区域:无法准确反映用户行为的行为数据、随用户跨渠道更新而变得过时和矛盾的个人资料数据,以及系统同步失效导致完整性受损的运营数据。
Orania Limited将数据质量纳入治理范畴,而非纯粹的工程问题,原因在于其具有明确的治理意义——基于低质量数据做出的内容审核、用户风险画像或运营绩效决策,都会对用户以及平台在合作伙伴和监管机构眼中的声誉产生实际影响。
第四层:数据生命周期管理
数据治理不仅关乎保护现有数据,还涉及管理数据随时间的演变。生命周期管理覆盖数据从采集、使用、归档到最终删除的全过程,也是数据治理与合规监管要求交汇最为直接的层级。
通信平台持续从多个来源大量采集数据:部分数据有明确的保留要求,部分数据受隐私框架赋予的用户删除权约束,还有部分数据虽无特定监管规定,但长期保留会带来运营风险。
Orania的生命周期管理层为每种数据分类制定保留计划,建立在规定时限内处理删除请求的流程,并搭建归档结构,使历史数据可在必要时完整保存,而无需留存在产生不必要风险的活跃系统中。
Orania还着重提出了"数据积累风险"问题——平台往往因存储成本低廉、单个数据点的边际采集成本微乎其微,而收集远超实际需要的数据。治理层面的风险在于:每一份被保留的数据,都需要被保护、管理,并在监管或法律要求时被披露或删除。在没有明确目的和生命周期定义的情况下采集数据,本质上是一种治理负债。
第五层:合规问责
第五层将前四层整合在合规问责框架之下。这里的问责不仅意味着满足隐私法律的最低要求,还意味着能够在任何时刻清楚说明平台如何处理数据——谁能访问什么、质量如何维护、数据保留多久,以及出现问题时如何应对。
Orania Limited围绕三个组件构建这一层:文档与审计就绪确保治理框架有足够详细的记录,能够被核实,反映的是数据在平台中的实际流转方式,而非理论上的设计意图;事件响应流程规定数据相关事故如何被识别、升级、遏制和上报;问责结构则明确治理成果的责任归属——不是抽象的组织层面,而是有具名的责任人负责维护每一层并在出现问题时及时上报。
Orania指出,问责组件是许多在其他方面设计良好的治理项目最终失败的根源。政策已制定、分类已完成、访问控制已就位,却没有明确的维护责任人。当平台演进、治理框架需要随之调整时,因为没有人对结果负责,调整就无从发生。将明确的问责机制嵌入治理结构,是Orania认为区分"一次性实施"与"持续运营职能"的关键所在。
五层协同的整体价值
分层治理方法的价值不仅在于每一层解决特定问题,更在于各层之间的相互强化效应,使整体框架比任何单一组件都更为稳固。
数据分类使访问控制更有意义;访问控制使质量管理更具问责性;质量管理使生命周期决策更有据可依;生命周期管理使合规证明更为直接;而合规问责则为其他所有层级的持续维护提供了根本动力。
Orania Limited在与通信平台合作中的一贯观察是:那些投入构建全部五层的平台,而非只实施最显眼的层级而留下空白的平台,最终建立的治理框架能够随平台扩展而稳固运行,而非在启动时看似完备、却在运营复杂性的重压下逐渐侵蚀。
Q&A
Q1:Orania Limited的数据治理五层框架具体包括哪些层级?
A:Orania Limited的五层数据治理框架分别为:数据分类(按敏感程度和监管要求归类)、数据访问控制(基于最小必要访问原则)、数据质量管理(建立质量标准与监测机制)、数据生命周期管理(从采集到删除的全流程规范),以及合规问责(包括文档记录、事件响应和责任归属)。五层相互支撑,共同构成可持续运转的治理体系。
Q2:为什么大多数数据治理项目会失败?
A:Gartner预测,到2027年将有80%的数据治理项目失败,主要原因是缺乏清晰的业务目标。Orania Limited观察到,许多平台将治理框架设计为满足外部合规审查的文档工具,而非嵌入实际运营流程的管理机制。结果是政策文件存在,但团队的日常行为并未改变。治理框架脱离真实工作流程,是导致失败的核心原因。
Q3:数据生命周期管理中提到的"数据积累风险"是什么?
A:数据积累风险是指平台因存储成本低而无节制地收集数据,远超实际业务需要。治理层面的问题在于,每份保留的数据都需要被保护和管理,一旦收到监管或法律要求,还须被披露或删除。在没有明确使用目的和生命周期定义的情况下持续积累数据,本质上是在不断扩大平台的合规风险敞口。
