【31页PPT】大数据治理管理平台解决方案.pptxVIP

大数据治理管理平台解决方案

目录CONTENTS背景与需求分析功能框架设计平台功能设计010302

PARTONE01背景与需求分析

背景与需求分析1.发展背景2.架构需求分析3.需求分析

背景与需求分析1.发展背景2.架构需求分析3.需求分析建立自身的统一技术栈：建立中心技术栈准入标准，一方面保障整体技术架构中组件的标准性，避免因为版本不一致和功能特性相近，增加不必要的运维成本，另外一方面，减少因为架构中采用组件的选型调整，增加不必要的集成开发工作。技术栈中的组件会持续补充完善，通过POC测试后，并经过专家委员会集体论证，且符合准入标准，才准技术组件进入到统一技术栈。开放架构平台本身具备模块化开放和集成能力，平台功能所对应的技术组件避免被某一家集成开发厂商捆绑，或者被某个单一组件产品捆绑。架构的先进性技术架构中的技术组件选型，从技术成熟度、性能、稳定性、持续研发升级、使用后业内评价、性、适配性等方面做出考量，为架构选型提供参考，保证整体架构中的组件的先进性。架构的高可用在长时间、多任务场景下的稳定运行。在计算机硬件、操作系统、存储系统及应用系统业务进程出现故障时能迅速响应并进行任务的切换；某一节点出现故障时，其他节点应能够自动分担故障节点的处理任务，保证服务持续可用。010302

数据治理管理平台-需求分析1.发展背景2.架构需求分析3.需求分析数据治理管理平台基于元模型驱动模式，构建一体化的数据资产管控，实现全流程、全生命周期和全景式的“三全”治理，确保每一份数据资产皆可靠、可信、可用。通过对数据、应用、系统综合管理，构建标准化、流程化、自动化、一体化的数据管理体系。

PARTTWO02功能架构设计

子平台关系定位1.子平台关系定位2.功能架构

功能架构数据平台数据资源管理数据加工处理数据质量管理质量模型方案配置规则管理质检报告数据质检质量统计数据标准管理元数据管理分类管理数据元管理标准代码配置常用规则配置元数据自动获取元数据维护元数据扫描元数据检索元数据版本权限管理及查询元数据导入/导出元数据分析基础标签管理标签关系展现元数据管理数据资产资产目录资产地图资产总览资产报告实时数据管理流数据处理实时采集流数据计算模型管理流数据计算公共模型开发流数据引擎流数据计算结果接口开发流数据计算模型查询支持流媒体采集及转发管理数据集成管理异常数据分析数据建模配置集成方案管理数据来源统计数据架构管理数据架构定义业务架构管理存储架构管理数据异常管理异常对接管理人工处理管理异常处理统计分析异常问题列表实时数据质量管理系统处理管理数据质量定制化开发数据开发管理数据开发管理统一调度管理统一调度管理数据标准管理监控运维运维任务实时分析数据运维定制化开发运维概览监控告警统一流程管理平台运维定制化开发数据分级1.子平台关系定位2.功能架构

PARTTWO03平台功能设计

数据资源管理1.数据标准管理2.元数据管理3.数据分级分类管理4.数据资产管理通过对数据标准管理、落地实施机制、及数据标准管理平台维护三部分进行数据资源管理，制定数据标准管理制度和流程，明确数据标准管理组织和职责，以明确的组织、职责、流程设计。落地实施机制从规范推广、技术平台支撑两方面保障；数据标准平台维护主要包括建设数据标准技术平台，支撑数据标准日常管理工作两方面。支持数据元版本管理及版本之间的差异核对功能以及支持基于基础库、主题库的元数据快速创建标准数据元，并建立和相关元数据的关联关系数据元管理数据元删除数据元检索数据元停用数据元导入数据元修改数据源发布数据元新增支持代码的分类、标准代码项的新增、导入、导出功能，提供了标准代码维护的能力；标准代码配置新增导入导出可关联到国标、地标代码字典通过固定的值组成规则来规范数据源值的格式，例如身份证、电话号码、电子邮箱等格式。常用规则配置通用规则实际制定规则常用规则配置会针对公共数据的特性内置部分常用的规则，同时提供了规则的配置修改能力

数据资源管理1.数据标准管理2.元数据管理3.数据分级分类管理4.数据资产管理通过对数据整合的层次结构、主题域划分，实现各层的各种对象，如表、存储过程、索引、数据链、函数和包等的管理。清晰的表示各层次结构之间的数据流程、各对象之间的关系，以及向外提供的各类数据服务的信息。元数据管理元数据管理包括元数据基础数据管理和元数据应用，由元数据自动获取、元数据检索、数据模型管理、元数据管理、血缘关系等功能组成等。元数据自动获取元数据维护元数据扫描元数据检索元数据版本权限管理及查询元数据的导入/导出配置自动获取策略和调度时间等，使元数据能够按预设的调度策略触发相应的元数据自动获取过程，满足元数据自动获取的时效性。包括元数据的