DataWorks大数据平台介绍.pptx

DataWorks大数据平台介绍;2009;DataWorks-一站式大数据研发+治理平台;DataWorks商业化收费模型;[基础版]

数据研发：快速构建数据仓库;[基础版];数据接入;[标准版];每月最后一日（29日/30日/31日）需要运行特定任务产出月报数据。

需以标准方式构建复杂业务流程。;线性依赖;判断节点;分支节点实现特定时间执行任务

场景描述：实现每月最后一日（29日/30日/31日）运行特定代码。解决方案：赋值节点与分支节点搭配，实现复杂逻辑判断。;SQL代码块需要给他人重复利用，复制粘贴效率太低且容易误操作。

需解决SQL代码复用的问题。;SQL组件

代码重用，同一代码块无需编辑多次；支持变量传参、多业务流程同时引用。;业务快速发展、流计算专业技术人员紧缺的情况下，企业需快速构建：;DAG开发、SQL/DAG互转0代码开发流计算任务与依赖关系

本地调试（专业版）调试结果实时可见;任务工作流庞大，维护每个任务监控规则非常痛苦！

需要简单快捷的方式来代替人肉进行有效监控。;智能监控;基线预警;02;某交易数据字段今日产出异常值，需找脏数据的源头。

需要简单快捷的方式来代替人肉进行有效监控。;表血缘字段血缘

数据从哪来？到哪去？;企业数据管理者需建立最基本的[数据审计机制]，至少实现：

*数据敏感级别分级、分类

*可视化（图形化）展示敏感数据

*审计内部人员对敏感数据的访问行为

*敏感数据可用不可见;敏感数据分级与发现识别数仓中的敏感数据;敏感数据访问行为审计谁？在什么时间点？以什么方式访问了敏感数据？;HASH脱敏

生成随机值替换真实值

假名脱敏

相同特征值替换

掩盖脱敏

*号掩盖;[专业版];*通过API对接具有不同数据结构要求的报表系统、可视化展现系统。

需实现API灵活适配不同协议、不同数据结构要求。;[;*流计算任务故障定位难，不仅浪费时间且结果不准确。

需实现快速、精准的故障定位。;智能运维让流计算问题排查变得简单！;企业特有（非通用）敏感数据需纳入敏感数据进行审计。

需识别不具有普遍性的敏感数据。;自定义内容扫描特定场景下才能才视为敏感信息的数据识别。;找到拥有较高数据权限人员的风险行为。

需识别预???外的敏感数据访问行为。;风险行为识别发现非预期数据访问行为。;[企业版];场景;数据服务;Select;JOIN;常见PII敏感数据的识别模型

通过内置扫描模型识别敏感数据。

场景;迅速识别特定的风险行为

通过内置风险识别模型识别非预期访问行为。;识别自定义枚举类型的敏感数据

通过数据样本库模式识别敏感数据。;DataWorks深度企业用户需定制化开发属于自己的DataWorks模块。;数据资产;[基础版]

数据研发：快速构建数据仓库;谢谢聆听！