汉语真实文本的语义角色标注

汉语真实文本的语义角色标注

ID:37115582

大小:1.36 MB

页数:52页

时间:2019-05-18

汉语真实文本的语义角色标注_第1页
汉语真实文本的语义角色标注_第2页
汉语真实文本的语义角色标注_第3页
汉语真实文本的语义角色标注_第4页
汉语真实文本的语义角色标注_第5页
资源描述:

《汉语真实文本的语义角色标注》由会员上传分享,免费在线阅读,更多相关内容在行业资料-天天文库

1、摘要语义角色标注在机器翻译、文本理解等自然语言处理系统中是一项必需的任务,它需要自动识别出句子中的谓词所关涉的论元结构。目前英语的语义角色标注系统很多,但汉语的相关研究还比较少见。汉语语义角色的确定有其自身的特点,不应该照搬英语的标注规范与方法。本文首次采用了清华大学开发的汉语句法树库TCT进行汉语真实文本的语义角色标注实验。这是语义角色标注的一种新的尝试,与以往的标注相比存在以下难点:(一)以往在Propbank中的标注都是按照每个谓词不同的语义框架选择了一些句子进行标注,这样对于自动标注会有帮助,但无法反映真实文本的情况,而

2、1℃T中的句子都没有经过人工的筛选,完全忠实于原来的文本,特别是汉语以分句较多为特点,而真实文本正反映了这个特点,增加了标注的难度;(二)实验中使用了小规模的训练语料和测试语料,这使得标注难度大大增加,而且为了验证标注方法的有效性,我们使用了5重交叉验证的方法,弥补了测试语料较少的缺撼;(三)本文实验使用的测试语料中的大部分谓词词形都没有出现在训练语料中,所以有关谓词框架的信息相对缺乏,而以往大部分测试语料中的谓词词形都会出现在训练语料中;(四)我们在标注中需要处理大量的名动词,而以往汉语和英语的标注中都没有包括名动词或名词化形

3、式:(五)TCT树库中缺乏空语类标记,我们的系统需要自动判断与空语类对应的论元。针对以上难点,我们采用了新的标注方法,构造了一个适合在小规模真实文本上进行语义角色标注的系统:(一)本文将统计和规则的方法结合起来,在规则制定的一些薄弱环节上,如谓词在名词短语中,谓词和论元在不同分句中,时间和持续的区分等,确定了不同的测试集、训练集,用决策树迸一步提高规则标注的准确率,并首次将规则标注的结果转换为规则特征,结合其它特征一起进行语义角色标注实验。实验结果表明,规则特征能够有效避免决策树对于训练数据的过适应(overfitting)问题

4、,在标注结果上好于概率特征:(二)我们的系统的识别过程分为四个步骤:首先用规则判定是否有谓词论元关系,接着用决策树判定谓词论元关系,用规则确定成分的语义角色,用决策树确定成分的语义角色;(三)在规则制定的过程中,我们充分利用句法和语义的对应关系,根据句法结构对谓词论元关系做了分类,如主谓结构中的谓词论元关系、名词短语内部的谓词论元关系等,并根据不同的类别采用了不同的识别策略;(四)汉语中的句式变换和倒装是影响汉语语义角色标注的主要因素,我们对不同类型的句式变换和倒装进行了讨论,并制定了相应的判断语义角色的规则;(五)目前针对语义

5、角色标注的资源还很缺乏,所以我们利用《同义词词林》等对谓词、名词进行划分,建立了用于区分语义角色的谓词词表和名词词表。并通过对介词的分类构造了一个介词词表,用于确定以介词为标记的论元的语义角色。本文的实验方法反映了汉语在语义角色标注上的特点,并在开放测试和封闭测试上取得了较好的效果,尽管使用的是真实文本,训练数据也比较少,但晟终规则加统计的方法的F值达到了82%。关键词:自然语言处理语义角色标注句法结构规则决策树2AbstractSemanticRoleLabelingisoneformulationofmachinetrasl

6、ationandinterpretingtext.ItneedtoidentifythesemanticargumentsfilIingtherolesofthesentencepredicatesantimatically.ThoughtheSRLsystemsinEnglishhaveusedmanystatisticalmetheds.thereisstillalackofstudiesinChinese.TheSRLinChinesehasitsowl]characteristics,soweshouldn’tcopyt

7、helabelingnol2]landmethodofEnglish.‘ThisdissertationfirsttrytolabelsemanticrolesincorpusofthetruetextinChineseusingTsinghuaChineseTreebank.ThisisanewattemptofSRL,andhavealotofdifficultieswhichthesystemsbeforedon’thave.(1)InPropbank。theyoftenselectsentencesaccordingto

8、theframesetofverbs.ItisfavourabletoSRL,butitcan’tgiveatruepictureofthetruetext.ThesentencesinTCTstickcloselytotheoriginalinsteadofb

当前文档最多预览五页,下载文档查看全文

此文档下载收益归作者所有

当前文档最多预览五页,下载文档查看全文
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,天天文库负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。