基于web搜索引擎的问答系统架构课件.ppt

《基于web搜索引擎的问答系统架构课件.ppt》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、李方涛2008.11.15问答系统介绍8/6/2021QuestionAnswering—FangtaoLi问答系统介绍背景介绍问答系统的历史问答系统分类相关系统介绍自动问答系统框架及相关研究未来可能研究方向总结8/6/2021QuestionAnswering—FangtaoLi10月12日英国图灵测试艾尔博特12日与12个陌生人交谈，力图让他们相信“它”是“人”，骗过3人8/6/2021GraphicModels--ShilinDING7月1日，微软收购PowerSet微软以1亿美金收购语义搜素引擎PowerSet8/6/2

2、021GraphicModels--ShilinDING背景介绍互联网信息增长全球手机用户今年底将达40亿人国际电信联盟手机用户日渐增多《2007年中国互联网络信息资源数量调查报告》中国互联网络信息中心(CNNIC)网页数量（亿）8/6/2021背景介绍搜索引擎技术的缺陷基于关键词,无法精确表达用户需求BooksforchildrenBooksbychildren返回的不是精确知识，而是相关文档列表查找相关文档获得知识，费时费力过多冗余信息不利于手机用户获取web知识屏幕小网速慢8/6/2021背景介绍自动问答系统基于自然语言的

3、搜索引擎输入的是以自然语言表示的句子输出的是问题的精确答案能更方便，快捷的满足用户的需求8/6/2021问答系统的历史SomeoftheearlyAIsystemswereQAs(1960s)BASEBALL:answeredquestionsabouttheUSbaseballleagueoveraperiodofoneyear.LUNAR：W.Woods研制成功的基于知识的自然语言理解系统.LUNAR用于查询月球地质数据,协助地质学家查询分析阿波罗11号在月球采集的岩石标本的成分,回答用户的问题。该系统的数据库中有13000

4、条化学分析规则和10000条文献论题索引.1971测试，答对90%以上的问题Thecommonfeatureofallthesesystemsisthattheyhadacoredatabaseorknowledgesystemthatwashand-writtenbyexpertsofthechosendomain8/6/2021QuestionAnswering—FangtaoLi问答系统的历史ELIEA：1968年J.Weizenbaum在美国麻省理工学院设计的基于"模式匹配"的自然语言系统中最有名的一个。ELIEA模拟一

5、位心理治疗医生(机器)同一位患者(用户)进行交谈.用的是模式及关键字匹配和置换的方法，没有发展成一套系统的技术。例如，假设有关键字me和句型模式：(*you**me)，而且还有一个与该模式对应的置换规则：（whatmakesyouthinkI**you），那么，当输入句为“Yesterdayyouhurtme.”时，输出为“WhatmakesyouthinkIhurtyou?”。ELIZA另外一个明显的弱点是：一旦发现用户输入中的一个关键字（词），便马上寻求答案，而不继续寻找用户句子中其它的关键字（词），这样使得一些优先级别比较

6、低的模式几乎永远不会被匹配到。8/6/2021QuestionAnswering—FangtaoLiA: It is certain I am a personB: How long have you been a person? A: More than 20 yearsB: Say, do you have any psychological problems? A: m...how about consciousness ?B: Are such questions on your mind often? A:

7、 yesB: I understand. A: tell me how are you thinking about the consciousness .问答系统的历史1999年开始，为鼓励QA的发展，TREC设立了QA任务，揭开了近年来开放领域自动问答系统研究的序幕2008年，又引入观点问答系统（opinionQA)至今，共有50多个机构参与了QA的评测，其中包含LCC,MIT,Stanford,IBM,NUS,Microsoft,Uni.ofEdinburgh，Uni.ofSheffield,USC以及国内的中科院，复

8、旦，哈工等高校和研究机构以及最近，社区问答系统正在越来越受关注8/6/2021QuestionAnswering—FangtaoLi问答系统分类自动问答系统（AutomaticQuestionAnswering）问题的答案存在于大量数据集中需要通过信息检索，自然