sql server数据库到hbase数据库的模式转换和数据迁移研究 the research of the schema conversion and data migration of server sql database to hbase database.pdfVIP

第６卷　 第５期 智　 能　 计　 算　 机　 与　 应　 用 Ｖｏｌ６ Ｎｏ５ 　 　 ２０ １６年１０月 ＩＮＴＥＬＬＩＧＥＮＴ ＣＯＭＰＵＴＥＲ ＡＮＤ ＡＰＰＬＩＣＡＴＩＯＮＳ Ｏｃｔ． ２０１６ 　 　 　 　 　 　 　 ＳＱＬ Ｓｅｒｖｅｒ数据库到ＨＢａｓｅ数据库的模式转换和数据迁移研究 １ １ ２ ２ 张华东 ，邵秀丽 ，吴　 军 ，王志刚 （１南开大学 计算机与控制工程学院，天津 ３００３５０；２ 天津港（集团）有限公司，天津 ３００４６１） 摘　 要：大数据背景下，ＳＱＬＳｅｒｖｅｒ关系型数据库的存储容量暴涨，如何高效实现把ＳＱＬＳｅｒｖｅｒ数据库中的数据迁移到ＨＢａｓｅ分布式数据库，是 亟需解决的一个关键问题。 讨论研究了２种数据库之间的差异之后，首先提出了数据库模式之间的转换，把ＳＱＬＳｅｒｖｅｒ数据表的模式，按照不丢 失关系的原则，转换成ＨＢａｓｅ下的表模式；然后根据不同的表间关系的数据迁移的规则，实现ＳＱＬ Ｓｅｒｖｅｒ数据库中的数据迁移到ＨＢａｓｅ数据库。 因为表间转换关系和数据迁移规则的预定义，实现了一键完成数据的迁移。 关键词：ＳＱＬ Ｓｅｒｖｅｒ；ＨＢａｓｅ；迁移；模式；转换 － － － 中图分类号：ＴＰ３９３ 文献标志码：Ａ 文章编号：２０９５ ２１６３（２０１６）０５ ００２４ ０８ Ｔｈｅ ｒｅｓｅａｒｃｈ ｏｆ ｔｈｅ ｓｃｈｅｍａ ｃｏｎｖｅｒｓｉｏｎ ａｎｄ ｄａｔａ ｍｉｇｒａｔｉｏｎ ｏｆ Ｓｅｒｖｅｒ ＳＱＬ ｄａｔａｂａｓｅ ｔｏ ＨＢａｓｅ ｄａｔａｂａｓｅ １ １ ２ ２ ＺＨＡＮＧ Ｈｕａｄｏｎｇ ，ＳＨＡＯ Ｘｉｕｌｉ ，ＷＵＪｕｎ ，ＷＡＮＧＺｈｉｇａｎｇ （１Ｃｏｌｌｅｇｅ ｏｆ Ｃｏｍｐｕｔｅｒ ａｎｄ Ｃｏｎｔｒｏｌ Ｅｎｇｉｎｅｅｒｉｎｇ，Ｎａｎｋａｉ Ｕｎｉｖｅｒｓｉｔｙ，Ｔｉａｎｊｉｎ ３００３５０，Ｃｈｉｎａ； ２ Ｔｉａｎｊｉｎ ｐｏｒｔ （Ｇｒｏｕｐ） Ｃｏ．，Ｌｔｄ．，Ｔｉａｎｊｉｎ ３００４６１，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ：Ｕｎｄｅｒ ｔｈｅ ｂａｃｋｇｒｏｕｎｄ ｏｆ ｂｉｇ ｄａｔａ，ＳＱＬ Ｓｅｒｖｅｒ ｒｅｌａｔｉｏｎａｌ ｄａｔａｂａｓｅ ｓｔｏｒａｇｅ ｃａｐａｃｉｔｙ ｓｏａｒｅｄ． Ｈｏｗ ｔｏ ｅｆｆｉｃｉｅｎｔｌｙ ｒｅａｌｉｚｅ ｔｈｅ ｄａｔａ ｍｉｇｒａｔｉｏｎ ｉｎ ａ ＳＱＬ ＳｅｒｖｅｒｄａｔａｂａｓｅｔｏｄｉｓｔｒｉｂｕｔｅｄｄａｔａｂａｓｅＨＢａｓｅｉｓａｋｅｙｐｒｏｂｌｅｍｎｅｅｄｅｄｔｏｓｏｌｖｅ．Ｔｈｅｐａｐｅｒｄｉｓｃｕｓｓｅｓａｎｄｒｅｓｅａｒｃｈｅｓｔｈｅ ｄｉｆｆｅｒｅｎｃｅｓ ｂｅｔｗｅｅｎ ｔｈｅｔｗｏｋｉｎｄｓｏｆｄａｔａｂａｓｅ．Ｆｉｒｓｔｐｒｏｐｏｓｅｔｈｅｃｏｎｖｅｒｓｉｏｎｂｅｔｗｅｅｎｔｈｅｄａｔａｂａｓｅｓｃｈｅｍａ，ｃｏｎｖｅｒｔｔｈｅＳＱＬＳｅｒｖｅｒｄａｔａｔａｂｌｅ ｓｃｈｅｍａ，ａｃｃｏｒｄｉｎｇ ｔｏ ｔｈｅ