抽取历史库和业务备份库DW表比业务表数据少.docxVIP

DW表比业务表数据少

1背景描述：代理作业执行成功完成后，数据从业务库中成功抽到DW库中，之后进行数据校验核对，判断数据量是否相同。

2报错信息：通过查询数据量，发现DW表比业务表数据少。

3原因分析：抽取包存在一些逻辑错误或主键错误，导致数据在某一段时间漏抽了。

4解决方法：（1）首先建立链接服务器：

打开SSMS，找到服务器对象--链接服务器，右击新建链接服务器，按如下操作：

常规---链接服务器（输入服务器名称），服务器类型（选择SQLSEVER）注意：此服务器必须可以在可连接的范围内。

(2)安全性---使用此安全上下文建立连接（输入登录名和密码）

建立成功后，在链接服务器下会出现该服务器，右键单击--测试连接，可验证连接是否成功。

(4)在DW库中执行脚本：

--将业务表中的主键值插入TEMP_TABLE中

Select主键1，主键2，...

IntoTEMP_TABLE

FROM[链接服务器名].源库名.dbo.表名with(nolock)

--获取DW表比业务表多的主键值数据并插入TEMP_TABLE_EX中

Selectt.主键1，t.主键2，...

intoTEMP_TABLE_EX

FROMTEMP_TABLEt

Wherenotexists

(select1from表名t1

Wheret.主键1=t1.主键1andt.主键2=t1.主键2and...)

--查询缺少的所有数据

Select*

from[链接服务器名].源库名.dbo.表名

Where主键1in（select主键1fromTEMP_TABLE_EX）

and主键2in（select主键2fromTEMP_TABLE_EX）

查询之后到将包复制到SSIS中，打开后在数据流任务中将from[链接服务器名].源库名.dbo.表名

Where主键1in（select主键1fromTEMP_TABLE_EX）

and主键2in（select主键2fromTEMP_TABLE_EX）

替换原来SQL语句中from之后的语句，重新运行，可查看到缺少的多少行数据已经抽过来。

注意：修改后的包不要保存并替换原有的包，只是用来抽取缺少数据使用。

--查询DW表的行数，验证结果

Selectcount(1)from表名

--删除TEMP_TABLE

DroptableTEMP_TABLE

--删除TEMP_TABLE_EX