Informatica_PowerCenter_v8题库.pptVIP

增量抽取实例 实例描述 对流过组件的每一条记录赋一个操作标志 根据操作标志对目标关系型数据库表生成SQL操作 操作标志有DD_INSERT、DD_DELETE、DD_UPDATE、DD_REJECT 解决方案 全表比较方法 时间戳方法 详见m_LAB_10 字段压缩比较 PowerExchange 第三天 增量抽取实例 参数文件控制 断点续传实例 存储过程实例 行列转换实例 系统性能调优 参数与变量存在的三种形式 系统级变量 SYSDATE 系统日期 SESSSTARTTIME SESSION启动时间 $$$SessStartTime 返回Session启动时间的字符串值 Mapping级参数与变量 SETMAXVARIABLE($$Variable,value) 设置最大值变量 SETMINVARIABLE($$Variable,value) 设置最小值变量 SETVARIABLE($$Variable,value) 设置变量值 SETCOUNTVARIABLE($$Variable) 设置递增、减变量 文件级参数与变量 固定格式 Mapping参数与变量形式 从Designer 中的Mappings/Mapplets 菜单中进行定义 在相应的Mapping或Mapplet中进行引用即可 设置变量变化类型 初始值设置 变量或参数名称定义：$$ 类型设置 参数文件形式 全局变量 域级服务变量 节点级服务处理变量 Workflow级变量 优先于前几级定义的变量 参数文件设置 Task参数文件设置 Workflow参数文件设置 参数文件的级别规则 GLOBAL SERVICE SERVICE PROCESS WORKFLOW SESSION 使用范围 执行优先权 高 低 低 高 Mapping与Workflow/Worklet之间进行变量传递 使用不同参数文件并行运行同一个Workflow 参数文件实例 实例描述 对源文本文件名进行参数化 对源表名进行参数化 对目标输出文本文件名进行参数化 对源与目标的数据库连接进行参数化 对日志文件及路径进行参数化 解决方案 详见m_LAB_11 注意事项 注意变量的命名规则：特别是固定的前缀 第三天 增量抽取实例 参数文件控制 断点续传实例 存储过程实例 行列转换实例 系统性能调优 断点续传实例 实例描述 当在数据抽取时，因意外致使数据抽取发生中断，重新启动服务时仍可从断点执行数据抽取 解决方案 通过表pm_recovery和PM_TGT_RUN_ID记载最近提交点的位置，当session失败(或停止)后可从断点处接着装载数据，在monitor中，recover task。 在源表数据未发生变化的前提下 详见m_LAB_12 监控脚本 select * from pm_recovery ; select row_count from pm_recovery ; select * from PM_TGT_RUN_ID; select count(*) from SessionRecovery_Target ; truncate table SessionRecovery_Target ; 断点续传实例 第三天 增量抽取实例 参数文件控制 断点续传实例 存储过程实例 行列转换实例 系统性能调优 存储过程实例 实例描述 将原始客户信息记录转换成合格标准的数据倒入到暂存区，转换处理在存储过程中完成 源表： customer_east.txt customer_west.txt customer_central.txt 目标： TDBU.STG_CUSTOMERS 解决方案 见存储过程EMP_INFA_TRANSFORM 详见m_LAB_13 第三天 增量抽取实例 参数文件控制 断点续传实例 存储过程实例 行列转换实例 系统性能调优 列行转换实例 实例描述 源数据一条记录有多个字段格式一样，经过格式化，到目标生成多条记录，并且只保留一个该格式字段。 解决方案 使用Normalizer组件，实现列/行转变 详见m_LAB_14_1 行列转转用Aggregator组件实现， 详见m_LAB_14_2 第三天 增量抽取实例 参数文件控制 断点续传实例 存储过程实例 行列转换实例 系统性能调优 瓶颈类型 Source瓶颈 Target瓶颈 Mapping瓶颈 Session瓶颈 System瓶颈 Source调优 源为文本文件 调优Line Sequential Buffer Length(1024) 源为关系型数据库 在Source Qualify优化SQL 在源数据增加索引 增加Database network Packet size 当DB跟Informatica在同一机器上