高校BBS检索系统的设计与实现

论文摘要

我们正处在一个高度信息化的社会,其信息量呈几何级数增长。随着BBS系统在各大高校的广泛应用,其中包含着大量令人感兴趣、有待进一步挖掘的信息。如果能将这些信息进行提取、分类、整理,并且以检索或目录查询的方式提供给普通用户,那么必将大大提高BBS信息的利用率,同时也将提高BBS信息的透明度,对高校网络信息管理带来方便。本文采用文本检索领域应用最广的Lucene实现高校BBS检索系统,以方便学生对信息的使用及管理部门对BBS的管理。本文首先论述了传统信息检索系统的技术以及高校BBS信息的特点,提出了基于Lucene的高校BBS检索系统框架,并针对系统中的信息获取、预处理及索引建立和查询过程进行了详细论述。目前该系统已经投入使用。

论文目录

• 摘要
• ABSTRACT
• 第一章 引言
• 1.1 问题的提出与意义
• 1.2 研究背景与现状
• 1.3 本文的主要内容及章节安排
• 第二章 信息检索系统的基本原理
• 2.1 信息检索概述
• 2.1.1 信息的定义
• 2.1.2 信息检索的含义与实质
• 2.2 几种常用信息检索模型介绍
• 2.2.1 布尔逻辑模型
• 2.2.2 向量空间模型
• 2.2.3 概率推理模型
• 2.3 高校BBS检索系统的体系结构
• 第三章 互联网信息抓取技术的实现
• 3.1 体系结构
• 3.2 数据结构
• 3.3 数据存储
• 3.4 线程管理
• 3.5 系统配置
• 3.6 实现中的其他问题
• 3.6.1 下载建立及消除
• 3.6.2 内容解析
• 3.6.3 异常处理策略
• 第四章 网页相似度计算的设计与实现
• 4.1 计算粒度的选择
• 4.2 基于全文匹配的相似度计算
• 4.3 基于语句匹配的相似度计算
• 4.4 基于词频统计的相似度计算
• 4.5 计算结果
• 4.5.1 基于全文匹配的计算结果
• 4.5.2 基于语句匹配计算的分析
• 4.5.3 基于词频统计计算的分析
• 4.5.4 阀值的选取
• 第五章 基于Lucene的索引建立及查询的实现
• 5.1 Lucene概述
• 5.1.1 Lucene的主要逻辑图
• 5.1.2 如何使用Lucene?
• 5.2 索引建立
• 5.2.1 索引建立的基本问题
• 5.2.2 索引的并发控制
• 5.3 搜索技术
• 5.3.1 查询特定的某个概念
• 5.3.2 Lucene的基本查询语句
• 5.4 系统界面
• 第六章 总结及展望
• 参考文献
• 致谢