▼
什么是数据管理?作为数据治理的“技术实现”
数据管理又有哪几大核心功能呢?
● 清洗和标准化:有助于数据质量政策的实施。画像工具能够帮助你将数据与已设定的数据质量标准进行有效性、准确性和完整性等比较。让你可以对无效值、拼写错误和遗漏值等问题进行修复。还可以将清洗规则嵌入数据输入过程中,让你在输入点就开始实施数据质量控制。画像工具能够帮助你识别数据源之间的相似性、差异性和关系,帮你移除那些重复的记录,并跨越不同数据源实现数据的一致性处理。还可以利用外部数据来丰富内部数据,例如邓白氏(DUNS)编码、人口统计数据和地理数据等。且如果企业创建了集中式的数据中心,将可以跨越不同数据源对主数据的语义一致性进行更好的维护。
● 脱敏和加密:能够帮助你实施隐私和保护政策。数据发现及分类工具和技术能够帮助你识别出敏感数据和个人数据,并基于内部需求和外部法规【例如:通用数据保护条例(GDPR)、加州消费者隐私法案(CCPA)和巴西通用数据保护法(LGPD)】,将相应数据加上“需要保护”的标签。这些标签后续可用于实施适当的保护控制措施。例如,根据分类和访问政策,某些用户可被授权访问原始数据,而当其他用户查询相应数据时,数据则需要进行动态脱敏处理。数据流建模可以加快机构内部和外部的数据采集、处理、存储和分发过程。接下来,你就可以基于分类和隐私政策决定采用何种适当的保护控制措施。例如,对于发生在防火墙内部的访问活动,数据脱敏可能比较适用,使数据在分享给机构外部的第三方之前,能够更加及时地对数据进行加密处理。
● 归档和删除:能够帮助你实施数据留存政策。当日常运营活动不再需要某些数据后,数据就会被归档,但这些数据仍然需要符合相关法规的要求,比如,税务报告或长期存储的要求。数据归档工具还要对数据应被存留多长时间进行跟踪,对数据进行索引,以方便数据检索需要,并实施适当的访问和数据脱敏/加密控制。在指定的数据存留期满后,数据将会被永久删除。尽管这看起来非常简单,但实际上,在行业法规【例如:BCBS 239(巴塞尔银行监管委员会239号条例)与综合资本分析和审查(CCAR)】的数据存留要求与政府及地区法规【(例如:通用数据保护条例(GDPR)、加州消费者隐私法案(CCPA)】的数据清除要求之间达成平衡是一项复杂的任务。