当前人社部、各省和市都在深入推进“互联网+”,公共服务改革与公共服务创新逐渐步入深水区,大数据越来越成为提高政府公共服务水平,提升政府治理能力的关键手段。
为满足各省、市人社部门日益增长的大数据平台建设需求,澳门新葡萄新京恩普自今年3月以来,在原有产品的基础上,基于中台架构对大数据产品进行了扩展升级,推出了全新的大数据平台解决方案。
新大数据平台采用数据、服务和业务应用项分离的模式进行设计,底层数据按照功能进行分区块组织管理,数据中台建设通用的大数据服务能力与支撑工具,从后台及业务系统将数据汇聚,完成海量数据的存储、计算、服务化包装过程,构成人社的核心数据能力,为前台业务基于数据的定制化创新和业务系统基于数据反馈的持续演进提供了支撑。
(大数据平台整体架构)
其中,数据中台是将大数据应用中必须的、通用的各种支撑能力与工具独立出来,按照功能类独立建设与封装成一个个能力中心,各中心可按照实际业务需求与场景进行单独部署,也可以进行集成部署统一面向上层业务应用提供支撑服务。
当前大数据平台解决方案规划的能力中心包括存储计算中心、数据治理中心、汇聚交换中心、服务开放中心、AI智能中心、用户画像中心、数据可视化等,根据实际项目建设需求,未来还将陆续构建其他的公共支撑能力中心和业务能力中心。
1、存储计算中心
存储计算中心是数据中台的核心之一,以元数据为基础,构建统一的数据模型,实现数据资产的统一管理,实现计算引擎的统一建设和应用。存储计算中心基于Hadoop架构,采用分布式云架构,实现租户管理、实时计算、离线计算、多维分析等功能。
2、数据治理中心
数据治理中心提供可管理、可追溯的一站式数据治理体系,包括数据标准管理、元数据管理、数据源管理能力、数据指标管理能力、数据血缘分析、数据质量检测、数据关系维护、数据安全管理、数据隐私保护等。
3、汇聚交换中心
汇聚交换中心以数据采集汇聚系统为核心,整合汇聚人社行业内外部数据资源,形成人社数据资源的统一入口,实现数据的采集汇聚和格式转换。汇聚交换中心包括数据交换、数据抽取、数据接口、数据导入等核心功能。
4、服务开放中心
服务开放中心提供可扩展高效能数据服务体系,提供统一的数据服务接口,支持多种服务类型,支持实时、离线数据服务,并对开放的服务进行统一管控和限流,防止计算资源滥用。
5、AI智能中心
AI智能中心基于Hadoop+Spark分布式计算平台,构建集数据接入、指标采集、数据处理、数据建模及结果展示为一体的可视化机器学习建模平台,辅助业务分析人员开展数据建模,提升建模效率。
6、用户画像中心
用户画像中心基于标签库设计面向单位、个人的基础用户画像,同时提供画像服务能力输出。用户画像中心包括标签管理、基础画像、数据关联、画像模型等功能。
7、数据可视化
数据可视化是通过BI工具,进行数据源管理、数据项管理、分析计算模型调用、报表调用管理、图表设计等功能组件。