基于语义约束的口型序列识别方法-计算机应用与软件.PDF

第２９卷第９期　　　 计算机应用与软件 Ｖｏｌ２９Ｎｏ．９ ２０１２年９月　　 ＣｏｍｐｕｔｅｒＡｐｐｌｉｃａｔｉｏｎｓａｎｄＳｏｆｔｗａｒｅ Ｓｅｐ．２０１２ 基于语义约束的口型序列识别方法 肖庆阳　张　金　左　闯　范娟婷　梁碧玮　邸硕临 （南开大学信息技术科学学院　天津３０００７１） 摘　要　　口型识别是唇语识别的重要环节，由于中文相似口型较多，口型识别率往往不高。针对这一问题，提出一种基于语义约 束的口型序列识别方法。该方法针对口型序列，利用语义约束和序列组合，分别对单一口型不易区分的情况和词语间隔不明显的情 况进行处理，实现音节序列的识别，从而完成信息的转换。通过实例对该方法进行了实验验证，表明该方法技术可行，并基于此提出 一种基于口型序列的唇语中文输入方法。 关键词　　图像处理　口型序列　语义约束　特征提取　输入方法 中图分类号　ＴＰ３０１　　　　文献标识码　Ａ ＤＯＩ：１０．３９６９／ｊ．ｉｓｓｎ．１０００３８６ｘ．２０１２．０９．０６０ ＡＭＯＵＴＨＳＨＡＰＥＳＥＱＵＥＮＣＥＲＥＣＯＧＮＩＴＩＯＮＭＥＴＨＯＤＢＡＳＥＤＯＮＳＥＭＡＮＴＩＣ ＣＯＮＳＴＲＡＩＮＴＳ ＸｉａｏＱｉｎｇｙａｎｇ　ＺｈａｎｇＪｉｎ　ＺｕｏＣｈｕａｎｇ　ＦａｎＪｕａｎｔｉｎｇ　ＬｉａｎｇＢｉｗｅｉ　ＤｉＳｈｕｏｌｉｎ （ＣｏｌｌｅｇｅｏｆＩｎｆｏｒｍａｔｉｏｎａｎｄＴｅｃｈｎｉｃａｌＳｃｉｅｎｃｅ，ＮａｎｋａｉＵｎｉｖｅｒｓｉｔｙ，Ｔｉａｎｊｉｎ３０００７１，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ　　Ｔｈｅｍｏｕｔｈｓｈａｐｅｒｅｃｏｇｎｉｔｉｏｎｉｓａｎｅｓｓｅｎｔｉａｌｐａｒｔｏｆｌｉｐｌａｎｇｕａｇｅｒｅｃｏｇｎｉｔｉｏｎ．Ｄｕｅｔｏｃｏｎｓｉｄｅｒａｂｌｅｓｉｍｉｌａｒｉｔｉｅｓｏｆｍｏｕｔｈｓｈａｐｅｓｉｎ Ｃｈｉｎｅｓｅ，ｕｓｕａｌｌｙｔｈｅｍｏｕｔｈｓｈａｐｅｒｅｃｏｇｎｉｔｉｏｎｒａｔｅｉｓｌｏｗ．Ａｉｍｉｎｇａｔｔｈｉｓｉｓｓｕｅ，ｗｅｂｒｉｎｇｆｏｒｗａｒｄａｎｅｗｍｏｕｔｈｓｈａｐｅｓｅｑｕｅｎｃｅｒｅｃｏｇｎｉｔｉｏｎ ｍｅｔｈｏｄｂａｓｅｄｏｎｓｅｍａｎｔｉｃｃｏｎｓｔｒａｉｎｔｓ．Ｉｎｌｉｇｈｔｏｆｍｏｕｔｈｓｈａｐｅｓｅｑｕｅｎｃｅ，ｔｈｅｍｅｔｈｏｄｅｍｐｌｏｙｓｓｅｍａｎｔｉｃｃｏｎｓｔｒａｉｎｓａｎｄｓｅｑｕｅｎｃｅｃｏｍｂｉｎａｔｉｏｎ ｔｏｄｅａｌｗｉｔｈｒｅｓｐｅｃｔｉｖｅｌｙｔｈｅｓｉｔｕａｔｉｏｎｏｆｓｉｎｇｌｅｍｏｕｔｈｓｈａｐｅｗｈｉｃｈｉｓｈａｒｄｔｏｂｅｄｉｓｔｉｎｇｕｉｓｈｅｄａｎｄｔｈｅｓｉｔｕａｔｉｏｎｏｆｉｎｄｉｓｔｉｎｃｔｉｖｅｉｎｔｅｒｖａｌｓｂｅ ｔｗｅｅｎｔｈｅｗｏｒｄｓ．Ｉｎｔｈｉｓｗａｙ，ｔｈｅｒｅｃｏｇｎｉｔｉｏｎｏｆｓｙｌｌａｂｌｅｓｅｑｕｅｎｃｅｉｓａｃｃｏｍｐｌｉｓｈｅｄａｎｄｔｈｅｍｅｓｓａｇｅｔｒａｎｓｌａｔｉｏｎｉｓａｃｈｉｅｖｅｄ．Ｅｘｐｅｒｉｍｅｎｔａｌｖａｌｉ ｄａｔｉｏｎｏｎｔｈｅｍｅｔｈｏｄｈａｓｂｅｅｎｃａｒｒｉｅｄｏｕｔｔｈｒｏｕｇｈｅｘａｍｐｌｅｓ，ｉｔｐｒｏｖｅｓｔｈａｔｔｈｅｍｅｔｈｏｄｉｓｔｅｃｈｎｉｃａｌｌｙｆｅａｓｉｂｌｅ．Ｍｏｒｅｏｖｅｒ，ｏｎｔｈｉｓｂａｓｉｓａｌｉｐ ｌａｎｇｕａｇｅｉｎｐｕｔａｐｐｒｏａｃｈｆｏｒＣｈｉｎｅｓｅｉｓｓｕｇｇｅｓｔｅｄ． Ｋｅｙｗｏｒｄｓ　　Ｉｍａｇｅｐｒｏｃｅｓｓｉｎｇ　Ｍｏｕｔｈｓｈａｐｅｓｅｑｕｅｎｃｅ　Ｓｅｍａｎｔｉｃｃｏｎｓｔｒａｉｎｔ　Ｆｅａｔｕｒｅｅｘｔｒａｃｔｉｏｎ　Ｉｎｐｕｔｍｅｔｈｏｄ 交流的安全性。唇语输入方法将有效解决在安静的公共场所不 ０　引　言 方便说话和在嘈杂场所对话听不清楚的难题，使日常输入方式 更加舒适和人性化，不仅可以帮助不习惯拼音输入法的用户，而 随着通信技术的发展