班智达汉藏公文翻译系统中基于二分法的句法分析方法研...

班智达汉藏公文翻译系统中基于二分法的句法分析方法研究才藏太 李延福（青海师范大学藏文智能信息处理中心 中国 青海 西宁 810008）caizangt@摘要机器翻译系统是一种典型的自然语言处理系统，语言技术是机器翻译系统中居于核心地位的技术，实用化的机器翻译系统一般是采用自然限制的受限语言的翻译，且以基于规则的方法为主流方法。

本文结合863项目《班智达汉藏公文机器翻译系统》的研制实践，论述了词项信息同语法规则相结合的原则，提出了以动词为中心的句法分析二分法，从而在受限语言的范围内，为建立有较大适应性的机器翻译规则系统，有效地提高机器翻译语法分析的效率提供了有益的方法。

关键词：机器翻译二分法语句结构句法分析1、引言随着计算机技术的不断普及，如何将大量的汉语和外语的科技信息、教材、参考读物、科普读物等及时地翻译成藏语，进而为广大藏区科技、教育、文化事业服务已成为制约广大藏区社会经济发展的关键问题。

在汉藏科技翻译人员极端缺乏的今日，班智达汉藏机器翻译系统的研制和推广应用必将有助于促进这一问题的尽快解决。

在机器翻译系统中，语言技术是居于核心地位的技术，因而讨论机器翻译系统的句法分析问题便是一个重要的问题。

机器翻译的方法有多种，但基于规则和词典的方法仍然是到目前为止的一直采用的主流方法。

我们研制的863项目班智达汉藏公文机器翻译系统是采用基于规则的翻译系统。

机器翻译进行的是两个语言无限集之间的转换，在现有的科学水平之下，计算机科学还不能从理论上证明，用一个有限的机器翻译规则系统来进行原语和译语的无限集之间的转换的可能性，因此实践上比较可行的办法是采用自然限制的受限语言。

我们研制的班智达汉藏公文机器翻译系统就是一种受限语言的机器翻译系统。

2、系统结构班智达汉藏机器翻译系统由科技系统、公文系统和电子词典三部分组成，采用C++语言在Windows环境下实现。

考虑到实际应用中用户的需要，系统设有译前和译后编辑功能。

系统所带的汉藏英三语对照的电子词典达到18.6万条，科技系统的翻译规则达到1500余条，公文系统的翻译规则达到1300余条。

科技系统对约30万词条、5万多个句子的实际语料的实验测试表明：译文的可读性总体达到80%以上，翻译速度为1050字/分（DELL PII300微机）。

公文系统对约1800多个句子的实验测试表明：译文的可读性总体达到78%，翻译速度为1100字/分（同上）。

下面对班智达汉藏公文机器翻译系统的系统结构作一介绍。

2.1 模块划分班智达汉藏公文机器翻译系统总体上可分为词典知识库维护、规则知识库维护、自动分词、汉藏翻译、系统设置等五部分组成（见图1）。

图中各模块的主要功能如下：● 词典维护模块负责管理用于汉语词切分、汉藏双语的词典，主要功能有词典的排序、词条的添加、删除、修改。

同时具备动态查询汉藏词汇的功能。

● 规则维护模块负责管理规则知识库，主要功能有规则库的排序、规则的添加、删除、修改。

同时按规则号或驱动词具备动态查询规则的功能。

为便于管理和减少规则冲突、提高规则的有效性，将所有规则分为短语规则、句型规则两大类实行分级管理及维护。

● 分词标注模块采用最大匹配算法并辅之于切分规则，对汉语文本进行自动分词；对分词结果进行词性标注时根据实际语料分为三类进行标注：一是对词典中存在的二字或二字以上词按词典提供的词性标注；二是对各类汉语标点符号、非汉语字符串、数字串（标为数词类）以及ASCII串分类进行标注；三是对判定为未登录词的汉字串进行标注（一般标为名词）。

● 汉藏翻译模块规则消歧包括语法规则消歧和语义规则消歧两部分，语法规则消歧又分为个性规则和通用规则两级；统计消歧是系统的辅助消歧手段，是根据不同的词在不同学科领域内使用的概率不等，同形异词在不同学科领域内所指的意义的概率也不等这一特点，采用“高频先见”的原则以提高系统的相对正确性。

短语合并的过程是将句子中的词按一定顺序合并构成短语，每个短语的句法功能和语义信息都和它的中心词相同，系统采用“孤立中心动词”的短语合并法。

句型匹配规则也分个性规则和共性规则，执行顺序是先个性后共性。

系统采用边分析边转换边生成的策略，最后对译文统一扫描一遍，生成藏译文。

● 系统设置模块系统设置模块向用户提供系统参数（词典、规则目录）的修改和设置功能。

图1： 班智达汉藏公文机器翻译系统结构2.2 工作流程系统工作流程如图2所示，图中各部分的主要功能如下：● 词典库词典采用数据库文件格式，在信息表示上采用了框架多值表示法，词条数据结构的一般形式如下：词典数据结构 ={汉语原词；控制信息；语法语义信息；藏语译文；}其中，汉语原词包括汉语常用词、成语、习用语和科技常用短语；控制信息用来控制词处理的流程，主要在处理词的搭配关系、动态词组的插入等操作时起制导作用；语法语义信息主要包括汉语词类信息、子类信息、语义信息，藏语词类、语义及格助词添接信息等。

这些信息在规则合并过程中将会动态地发生变化，特别是动词时态信息只有在规则中动态地体现；藏语译文为汉语原词对应的藏译词。

● 规则库规则的数据结构如下：规则={<头部><动态信息域><转换域><生成域><类别域><维护域>} 其中，头部包括关键驱动词、规则左部和右部，主要供汉语分析使用；动态信息域纪录合并前后的词、词组或短语的语法、语义及时态信息；转换域供汉藏结构转换使用；生成域主要供格助词添接使用；类别域用于区分不同属性的规则类别；维护域仅供在维护规则时使用。

图2：班智达汉藏公文机器翻译系统工作流程● 原文的输入可采用文本文件、键盘输入以及扫描输入。

● 建立切分文本、并完成词性标注。

● 利用规则库的消歧规则排除兼类歧义，若无消歧规则则默认第一词性。

●依次调用短语四级规则完成短语合并。

● 逐次扫描句型规则完成句型匹配，对复句利用标点符号进行合成。

● 逐句扫描译文、添接藏文格助词、输出汉藏对照译文。

3、句法分析正如在引言中所谈到的，在机器翻译系统中，语言技术是居于核心地位的技术，下面就班智达汉藏公文机器翻译系统的句法分析的一些问题作一讨论。

3.1词项信息同语法规则相结合随着技术的发展，词典在自然语言处理系统中的地位越来越重要，电子词典已成为自然语言处理实用系统开发的基础。

词典作为语法的一个重要的有机组成部分，在实用系统中，词典中每个词项所附加的信息需要同语法规则相结合，以实现由词项驱动规则，这是因为机器翻译的核心技术之一就是在两种不同语言的内部结构之间实现转换。

要实现两种语言的内部结构的转换，就得了解两种语言的语句结构的特点。

将现代汉语同现代藏语的语句结构进行比较，从大的方面说，差别主要有三条：（1） 语序不同。

汉语的语序通常是SVO（S是主语，V是谓语，O是宾语），藏语的语序是SOV。

例如：汉语句子汉语结构藏语句子藏语结构a. 我是教师S+V+O S+O+Vb. 我看了书S+V+O S+(格助词)+O+(格助词)+Vc. 学生在教室里．S+V+O S+O+(格助词)+V语序不同的另一个表现是：形容词、数词、代词作定语时，汉语中它们都在中心词的前面，而藏语中它们一般在中心词的后面，如：汉语句子汉语结构藏语句子藏语结构d. 新兵．．．＋形容词．形容词＋中心词．．．中心词e. 三国．数词＋中心词．．．＋数词．．．中心词f. 那个人．代词＋中心词．．．＋代词．．．中心词语序不同还表现在介词与名词的关系上，如：我用钢笔写字S+介+名+V+O S+（格助词）+名+介+O+V （2）形态变化不同。

汉语缺少形态变化，而藏语有形态变化，动词的时态形式就是一个突出表现。

藏语动词有时态形式，如“吃”有(现在式)，（过去式）和（未来式）三种时态形式；而汉语动词没有时态形式，如“吃”，汉语中只有一种形式，时态是用特定词汇表示的，若表示过去式加“了”，表示未来式加“将”。

（3） 表达方式不同。

汉语句子主要靠词序来表达，而藏语句子主要借助格助词来表达，藏语句子中格助词的添接直接关乎句子所表达意思的正确与否。

这里就将汉语动词和藏语动词进一步比较一下： 汉语的动词有及物和不及物之分，藏语动词同样有及物和不及物之分，但又有明显区别。

在汉语中及物动词与主语、宾语的关系一般地只有一种形式，即SVO，但在藏语中，及物动词同主语、宾语的关系有多种形式，需要加不同的格助词；还有，汉语的及物动词没有自动和他动之区分，在藏语中及物动词有自动和他动之分（自动词的动作是可以由主观决定的，他动词的动作是不能由主观决定的），自动及物动词和他动及物动词同主语、宾语的搭配关系有不同的结构，这样一来，词典中动词所附加的信息就要反映出藏语动词的这个特点，才能做到同语法规则的结合，现举例说明之：若以t和i分别表示及物和不及物，以z、t和l分别表示及物动词的藏语自动、藏语他动和藏语领属关系，以x、l和k表示藏语及物动词的三种动词与主语、宾词的搭配关系，以X表示施动格用字，以L 表示示宾词，在藏语中，宾语表示谓语动作的对象，宾语还可以表示动作的地点、动作的结果和动作的工具。

L还表示做“领有”的主语的格助词。

则可将动词的词性标注的词项信息同藏语语法结构的信息联系起来，如下面的示例：动词词项信息汉语句子汉语结构藏语句子藏语结构a．来到 vvttl 我们来到北京S+V+O S+O+L+Vb. 保持 vvttx 我们 保持 联系 S+V+O S+X+O+Vc. 研究 vvttk 我们 研究 问题 S+V+O S+X+O+L+Vd．有vvtl 我有书S+V+O S+L+O+Ve. 来自vvtz 我来自青海S+V+O S+O+L+Vf. 得出结论 vvitl 我得出结论S+V S+L+Og. 讲课vvitx 老师讲课S+V S+X+V上述例子表明，词项信息同语法规则相结合，就能在受限语言的范围内，建立有较大适应性的机器翻译规则系统。

3.2 以动词为中心的句法分析二分法任何一个机器翻译系统都是要经过长期的调试和不断优化后才可能建成，这是因为词典中每增加一个常用词，就有可能增加新的规则，或者要修改原有的规则，而新规则的增加又往往导致整个系统中的规则重新组合和调整；因此，在机器翻译系统的研制中，尽量减少调整的工作量或缩短调整的时间，则是一个重要的问题。

这里，结合班智达汉藏公文机器翻译系统的研制介绍一种句子分析生成的方法，应用它可有效地减少规则数量，从而减少规则重组和调整的工作量。

现有的机器翻译系统一般都是以句子为单位进行翻译的，语法分析算法也是得到句子作为分析的结果的。

由于汉语和藏语，都有主语、谓语和宾语，因而也会很自然地采用三分法，即把句子按主、谓、宾三部分进行合成和转换。

我们在班智达汉藏公文翻译系统的研制中，采用了句法分析二分法，同样达到三分法的效果，但语法规则数量却大大减少了。