基于双向匹配的中文分词算法的研究与实现

《基于双向匹配的中文分词算法的研究与实现》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、石家庄经济学院本科生毕业论文摘要中文分词是信息提取、信息检索、机器翻译、文本分类、自动文摘、语音识别、文本语音转换、自然语言理解等中文信息处理领域的基础，虽然研究了很多年，但是中文分词依然是中文信息处理的瓶颈之一。本文首先将已有的分词算法进行了分析、总结和归纳，讨论了中文识别一直难以很好解决的两大问题：歧义识别和未登录词。接着在基于词典的基础上将最大正向匹配和最大逆向匹配结合起来，得到了双向匹配分词算法，并且使用了自己提出的字典机制（子字典机制）实现了一个基于双向匹配算法的中文分词系统。关键词：中文分词；双向匹配；子字典机制ABSTRACTChinesew

2、ordsegmentationisthebasisofinformationextraction,informationretrieval,machinetranslation,textcategorization,automaticsummarization,speechrecognition,text-speech,naturallanguageunderstandingandotherChineseinformationprocessing,althoughChinesewordsegmentationhasbeenstudiedformanyyea

3、rs,theChinesewordisoneoftheBottleneckofChineseinformationprocessing.Firstly,thispaperistopresentthesegmentationalgorithmwhichhasbeenanalyzed,summarized,discussedtheimplementationoftheChinesehasnotbeenidentifiedtwomajorproblems:ambiguouswordrecognitionandnotlanding.Then,thebasisoft

4、hedictionarywillbebasedonmaximummatchingandmaximumreversepositivematchtogethertoformatwo-waymatchingwordsegmentationalgorithm,andusesitsowndictionarymechanismproposedby(adictionarymechanism.)toachieveatwo-waymatchingalgorithmbasedonChinesewordsegmentationsystem.Keywords:Chinesewor

5、d;two-waymatch;Sub-dictionarymechanismⅠ石家庄经济学院本科生毕业论文目录摘要.............................................................................................................................ⅠABSTRACT..........................................................................................

6、.......................Ⅰ1引言.............................................................................................................................11.1研究背景、目的及意义...........................................................................................11.2中文分词的现状.............

7、.......................................................................................11.3本文的主要创新点................................................................................................31.4课题任务和论文结构.........................................................................

8、...................32中文分词简介......