基于知识库的问答
日期: 2018-12-25 12:13:00 / 人气: 6657
引言
下图是问答系统的发展历史。从2010年起,基于知识库的问答就起步了,所以这个领域已经有八年的研究历史了。
图1 问答的历史发展
知识库问答
知识库问答(KBQA)是以自然语言的形式给出问题,通过对问题进行语义理解和解析,进而利用知识库进行查询、推理得出答案。
图2 问题“姚明的老婆的国籍是?”最终得到回答“中国”
语义解析将问题转化为语义表示,语义表示有两种:基于符号的表示方法和基于分布式的表示方法。
基于符号表示的知识库问答(传统)
首先将问句转化为逻辑表达式、Lambda Calculus等符号语义表示形式,林德康在知识图谱与问答系统前沿技术研讨会暨清华大学“计算未来” 博士生论坛上举例,问题"Who was Tom Cruise's wife in 2007?" 将会被转化为“λx.∃e.Marriage(x, e) ∧ Spouse(e, TomCruise) ∧ Year(MarriageFrom(e)) =2007”的语义表示,然后将语义表示转化为SQL、SPARQL等数据库检索语句,并最终得到问题的答案。
语义解析的方法至今研究成果挺多:
- Zettlemoyer在1995年提出组合范畴语法(Combinatory Categorical Grammars)
- Zelle在1995年提出“移位-规约”推导(Shift-reduce Derivations)
- Wong在2007年提出同步语法(Synchronous Grammars)
- Lu在2008年提出混合树(Hybrid Tree)
- Clarke在2010年提出类CFG语法(CFG-like Grammars)
- Liang在2011年提出类CYK方法(CYK-like Grammars)
在这些研究成果基础上总结出语义解析的基本过程:短语检测+资源映射+语义组合,并最终生成逻辑表达式。如下图3所示。
图3 语义解析的过程
语义解析的两个关键点就是如何获得短语到资源的映射和如何解决歧义问题。前者是将文本中的类别、关系和实体映射到知识库中对应的类别、关系和实体。
基于分布式表示的知识库问答(End to End DL-based)
这里给出5篇论文:
- Bordes et al. Open Question Answering with Weakly Supervised Embedding Models, In Proceedings of ECML-PKDD 2014
- Bordes et al. Question Answering with Subgraph Embedding, In Proceedings of EMNLP 2014
- Yang et al. Joint Relational Embeddings for Knowledge-Based Question Answering, In Proceedings of EMNLP 2014
- Dong et al. Question Answering over Freebase with Multi-Column Convolutional Neural Network, In Proceedings of ACL 2015
- Bordes et al. Large-scale Simple Question Answering with Memory Network, In Proceedings of ICIR 2015
公开的评测数据集
【1】林德康,Singulariti联合创始人,前Google高级科学家
作者:大不了敲一辈子代码
推荐内容 Recommended
- 知识付费时代的知识经纪人... 08-02
- 知识付费的未来是什么?... 07-30
- “知识付费”会让知识更值钱吗?... 11-17
- 内容创业知识付费让知识变现几点... 11-17
- “股神”巴菲特:互联网将为教育... 11-10
- 知识变现是什么?有哪些形式?... 11-05
- 企业付款到零钱 接口开通条件... 11-04
- 知识付费大幕已拉开,优质内容受... 10-31
- 从知识付费看优质内容的生产... 10-31
- 七牛云融合 CDN 使用场景... 04-19
相关内容 Related
- 阿里云服务器快照原理图文介绍... 11-17
- 自动问答研究进展、现状及趋势... 01-02
- 个性化问答系统架构... 01-02
- 基于知识库的问答... 12-25
- 无从下手落地问答系统?实用百度... 12-24
- 人机问答系统介绍... 12-24
- 人机问答系统的类别... 12-13
- 怎么利用知识图谱构建智能问答系... 12-10
- 问答系统设计的一些思考... 12-07
- 基于sklearn库,搭建一个... 12-06