中国联通大数据资产管理平台设计与研发实践

今天早上例行上报健康码和行程卡，发现行程卡无法登陆，报数据异常错误，就和老同事打了个电话确认下，才知道行程卡数据服务是由移动集团公司统一提供的，如果当初没离开移动，负责行程卡数据的应该是我了，其实每个技术人的梦想都是希望自己的成果或产品被广泛应用，而不是束之高阁。当初为了实现统一的位置模型，花了好几个月时间进行数据模型规划和验证，后来又经过了几个数据应用（校园、候鸟和旅游）的验证，这个位置模型还是卓有成效的。

中国联合网络通信集团有限公司于2009年1月6日在原中国网通和原中国联通的基础上合并组建而成，在国内31个省（自治区、直辖市）和境外多个国家和地区设有分支机构，是中国唯一一家在纽约、香港、上海三地同时上市的电信运营企业，连续多年入选“世界500强企业”。

下图为三大运营商2020年12月的运营数据，可以看到中国移动在移动用户数、4G用户数、5G用户数占据绝对优势，有线宽带用户数也是移动占据优势，中国联通在三大运营商中各方面均处于下风。

回到正题上，中国联通在DAMS中国数据智能管理峰会上做了大数据资产管理平台设计与研发实践的分享，三大运营商在大数据平台建设、数据资产管理上在业界还是做的不错的，在数据资产管理上，联通提到的集群治理平台产品还是值得借鉴的，定位上基于hadoop集群底层组件运行机制和大数据开发运维等组织活动进行多维交叉洞察，以降本增效为中心，向下保障大规模Hadoop集群算力，向上指导数据治理动作实施和业务连续性。原则是自底向上，用大数据的技术手段解决大规模数据集群治理层面的各种问题，大数据集群治理平台针对大数据集群和数据加工流程进行精细化监控分析，从资源画像、存储画像、作业画像、RPC 画像、冗余计算挖掘、数据血缘分析、用户行为告警八大维度几十个小维度交叉洞察可优化作业和业务处理流程，不断驱动集群资源优化。

其实不仅业务是生产力，技术也是生产力，只是很多高喊数字化转型和提升研发能力的在位者，显然还无法意识到技术的重要性。

本文分享自微信公众号：追梦IT人（baoqiangwang2020）