面向真实环境的金融问答系统

论文摘要

金融领域在中国得到了越来越多人的关注,与金融相关的信息也呈爆炸性增长。广大股民基民们迫切需要一个能够针对金融领域答疑解惑的工具。但是长期以来,自动问答系统的研究主要关注的事实类问题,而这类问题只占现实生活中人们所提出的问题的很小一部分,远远不能满足社会对问答系统所期望的全部信息需求。同时,大量的在线网友问答平台和FAQ (Frequently asked questions)服务涌现出来,这类系统集合了所有网民的智慧为有需要的人提供知识服务。如果能将自动问答技术和网友问答系统结合起来,以网友问答的内容作为知识库,通过自动问答的相关技术从知识库中查找最适合的现成的答案,则能在一定程度上满足日益增长的,对金融领域知识的需求。课题的研究工作主要包括:(1)搭建在线问答系统,既能收集问题答案对,同时作为展示平台。(2)编写爬虫获取主流在线网友问答系统的金融领域的问题答案对,建立知识库。(3)总结面向真实环境的问句出现的特殊现象和复杂现象,提出了处理这些现象的预处理方法。(4)研究了自动问答相关技术,包括问题简化,问题分类,问句相似度计算等,并且应用到自动问答系统中。(5)手工标注金融领域问句语料2万句,并且在此基础上研究面向金融领域问句的句法分析技术,将句法分析技术应用于问句分类,问句相似度计算阶段。实验结果表明,证明句法分析可以提高分类和相似度计算的准确度。最后本课题实现了一个面向金融领域的自动问答系统,该系统包含一个面向金融领域的网友问答子系统和一个自动问答子系统。其中网友问答子系统为用户提供一个问答和交流的平台。而自动问答子系统将庞大的在线网友问答数据作为知识库,通过查找并返回现有问题列表中与用户所提问题语义等价或相近的问题答案对来回答用户的问题。本系统的研究成果和采用的技术也能适用于其他限定领域的基于FAQ的问答系统。

论文目录

• 摘要
• Abstract
• 第1章 绪论
• 1.1 课题背景、目的和意义
• 1.2 问答系统国内外发展概况
• 1.2.1 问答系统概述
• 1.2.2 问答系统技术概述
• 1.3 本文主要研究内容与组织
• 1.3.1 本文内容
• 1.3.2 本文的组织
• 第2章 在线网友问答系统的设计与实现
• 2.1 面向真实环境的金融问答系统整体结构
• 2.2 在线网友问答系统概况
• 2.3 网友问答系统的架构原理
• 2.3.1 MVC 模式简介
• 2.3.2 在线网友问答系统的功能模块
• 2.3.3 问答模块
• 2.3.4 PK 模块功能
• 2.3.5 问答栏目设置
• 2.3.6 主要界面
• 第3章 自动问答系统的设计与实现
• 3.1 自动问答系统结构
• 3.2 问答对库的建立
• 3.2.1 问答对的获取
• 3.2.2 问答对库的构建
• 3.3 问句处理
• 3.3.1 去除噪音词
• 3.3.2 问题简化
• 3.3.3 问题分词标注
• 3.3.4 句法分析
• 3.3.5 问句分类
• 3.4 问句相似度计算
• 3.5 本章小结
• 第4章 面向问句的句法分析
• 4.1 现有的句法分析技术
• 4.1.1 基于规则的句法分析
• 4.1.2 基于统计的句法分析
• 4.1.3 中文句法分析现状
• 4.2 本系统采用的句法分析算法
• 4.2.1 自顶向下算法（Up2Down）
• 4.2.2 自底向上算法（Dow112Up）
• 4.2.3 最大生成树算法
• 4.3 句法依存关系权重模型
• 4.3.1 最大熵模型
• 4.3.2 训练实例选择
• 4.3.3 特征模板
• 4.4 依存句法分析实验
• 4.5 依存句法分析在问句相似度计算中的应用
• 结论
• 参考文献
• 攻读硕士学位期间发表的学术论文
• 致谢