最具影响力的数字化技术在线社区

168大数据

 找回密码
 立即注册

QQ登录

只需一步,快速开始

1 2 3 4 5
打印 上一主题 下一主题
开启左侧

[理论框架] 数据模型:数字化转型的核心能力

[复制链接]
跳转到指定楼层
楼主
发表于 2019-8-16 20:39:45 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式

马上注册,结交更多数据大咖,获取更多知识干货,轻松玩转大数据

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
本帖最后由 168主编 于 2019-11-1 10:19 编辑

作者:龚菲
来源:DG数据治理

导读:业界数字化转型已经进入深水区,数据越来越受到大家重视,由于数据中台等等概念的兴起,大家越来越回到数据的根本问题“数据模型”。今天不谈论高大上的数据中台,我想回到数据的本源,谈谈接地气的数据模型。

什么是数据模型
我们可以先看一下生活中的模型的例子,房屋平面图、地图等都是很好的模型的示例。
对于下图的房屋平面图来说,我们基本看一眼就能知道这是一个三室两厅两卫的房子,有一个玄关和一个阳台,哪里是门,哪里是墙,哪里是窗户,每个房间的平米数是多少,全部都用各种符号表示得一清二楚。
对于地图来说,我们也知道绿色的部分一般都表示公园,蓝色的部分表示湖,黄色的粗线表示高速公路…


图 1生活中的“模型”(图片来源与网络)

数据模型是用于描绘、沟通数据需求的一组简单易懂、标准的,并且便于计算机实现标准符号的集合
我们都知道数据库很强大,但数据在其中的关系却错综复杂,成千上万个表通过各种关系或约 束互连以形成复杂的结构。没有数据模型,利益相关者很难看到现有数据库的结构、理解关键概念,当需要描述数据需求的时候,也很难准确地表达出来,这也是数据模型很重要的一个最主要的原因。
下图是一个简单数据模型的示例:

图 2一个关于学生-出勤-课程的数据模型
(图片来源:数据建模经典教程,Steve Hoberman)


数据模型的几个关键形容词

1 数据模型是一组符号集合
与实物模型不同,数据模型不是等比例模拟出来的真实事物,而是一组能表示数据需求、数据结构的符号集合
在房屋平面图中,中间有条线的矩形表示窗户,用直角扇形表示门。在数据模型中,用矩形框或圆角矩形表示实体,用线以及线上的符号表示实体之间的关系、基数或约束,用写在线上的词或词组表示标签,所有的这些符号组成了各种各样的数据模型

2 数据模型是用来描绘、沟通数据需求的
建筑设计师在盖房之前通过房屋平面图描绘建筑需求,建筑工人就可以看着这些平面图来盖房子。房子盖完之后还可以把房屋平面图展示给客户,这样即使客户不去现场看实体房就可以大概了解房屋结构。数据模型也是专门设计出来描绘数据需求,给技术实现人员来建造数据库,并且实现数据需求无障碍沟通的“图纸”。

3数据模型是简单易懂、标准的
模型之所以可以让人们实现快速沟通,是因为足够标准并且简单易懂。自古以来,无论是盖房子还是造火箭,都不可能事先把庞大复杂的实物拿过来给大家介绍,相反只需要通过一些简单标准的符号,就可以表示清楚具体的意思。一旦读者看到标准的模型语言,他们能马上能开始讨论这个模型是否准确,而不需要浪费任何额外的时间去探讨建模用的符号是什么意思

4 数据模型是便于计算机实现的
数据模型从一个抽象层次描述了数据的静态特征、动态行为和约束条件,最终是要通过技术实现人员转化成能被计算机理解的程序语言,并且在数据库中实现出来的。所以在设计数据模型的时候,必须将便于计算机实现作为模型设计的原则之一。

为什么需要数据模型
企业中经常会出现以下问题:
1. 不同技术背景和业务经验的各类人员在讨论数据需求时缺少一种有效的沟通工具,在讨论中经常因为对各种符号理解不一致,导致沟通效率低下,不同观点之间很难协调,达成共识。
2. 当系统出现故障或发现数据问题时,没有可以观察系统的整体视角,技术人员对当前数据库内的状况全然不知,导致系统问题排查困难,数据问题无从下手。
3. 不同部门对业务规则的理解不一致,关于“客户”、“产品”等关键概念含义多种多样,数据库中同名不同义,同义不同名现象随处可见,极大地影响了数据的识别和应用。
4. ......
数据模型作为不同技术背景和业务经验的各类人员有效沟通数据需求的重要媒介,可以帮助描述与沟通数据需求、增加数据的精确性与易用性、降低系统的维护成本并增加数据可重用性,极大地减少了以上问题出现的频率。

1 数据模型可以帮助不同人员
描述与沟通数据需求
在企业中,来自不同部门、具有不同技术背景的业务人员、业务分析师、数据分析师、建模人员、架构师、数据库设计人员、开发人员等各类人员经常需要共同讨论数据问题与数据需求。数据模型作为一种理想的沟通工具,可以快速使相关人员达成共识,跳过对符号的理解而直接讨论深层需求。

2 数据模型可以增加数据的精确性与易用性
数据模型中的精确定义为数据提供了一个规范的结构,数据建模过程本身是发现、分析、界定数据需求的过程,可以帮助解释数据上下文的边界,减少数据访问和数据存储时发生数据异常的可能性。通过说明数据中的结构和关系,数据模型使数据更易于使用。

3 数据模型可以降低系统维护成本、
提升资产可重用性
数据模型有助于我们从整体视角了解业务与数据现状,并有助于人们分析目前可能存在的业务与数据问题、分析修改现有数据结构是否可行和每次修改可能会带来的影响,降低维护成本。另外,数据模型以相对标准精确的形式保留了关于企业系统或项目的记忆,这些记忆可以作为可重用性资产供未来项目使用,从而降低构建新应用程序的成本。

总结
作为不同技术背景与业务经验的各类人员有效沟通数据需求的重要媒介,数据模型越来越成为数字化转型的核心能力。数据模型有助于人们描述与沟通数据需求、增加数据的精确性与易用性、降低系统的维护成本并增加可重用性。

参考
[1]DAMA International.DAMA-DMBOK: Data Management Body of Knowledge (2nd Edition)[M].Technics Publications:BASKING RIDGE, NEW JERSEY,2017:123.
[2]Steve Hoberman.Data Modeling Made Simple: A Practical Guide for Business and IT Professionals[M].Technics Publications:BASKING RIDGE, NEW JERSEY,2009
楼主热帖
分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
收藏收藏 转播转播 分享分享 分享淘帖 赞 踩

168大数据 - 论坛版权1.本主题所有言论和图片纯属网友个人见解,与本站立场无关
2.本站所有主题由网友自行投稿发布。若为首发或独家,该帖子作者与168大数据享有帖子相关版权。
3.其他单位或个人使用、转载或引用本文时必须同时征得该帖子作者和168大数据的同意,并添加本文出处。
4.本站所收集的部分公开资料来源于网络,转载目的在于传递价值及用于交流学习,并不代表本站赞同其观点和对其真实性负责,也不构成任何其他建议。
5.任何通过此网页连接而得到的资讯、产品及服务,本站概不负责,亦不负任何法律责任。
6.本站遵循行业规范,任何转载的稿件都会明确标注作者和来源,若标注有误或遗漏而侵犯到任何版权问题,请尽快告知,本站将及时删除。
7.168大数据管理员和版主有权不事先通知发贴者而删除本文。

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /1 下一条

关于我们|小黑屋|Archiver|168大数据 ( 京ICP备14035423号|申请友情链接

GMT+8, 2024-4-27 05:50

Powered by BI168大数据社区

© 2012-2014 168大数据

快速回复 返回顶部 返回列表