面向公安领域的海量数据存储检索系统的开发

论文摘要

随着社会治安形势日趋复杂,公安侦查工作正面临严峻挑战。为逃避法律制裁,犯罪分子掩盖事实真相的手段变得更加隐蔽。在侦办案件过程中,侦查员经常需要从大量的资料中提取或发现与案件相关的、有价值的信息或线索。采取传统侦查方式对大量资料进行人工收集和检索,不仅工作量大,同时也不能期望通过人工的方式对所有的资料进行完全的分析,而且不能保证所搜集资料的实时性。为适应现代侦查工作的现实需要,对符合条件的数据信息建立海量数据库并从中快速定位犯罪分子行踪,这样的侦查方式不仅保证了资料的实时性,同时,侦察员能更加灵活地分析数据,从而,为侦查破案提供更多信息和线索。由此,公安领域海量数据存储检索系统的建立是公安侦查工作的需要,也是公安侦查工作面对挑战而转变的必然。在此背景下,我们研究和开发了一个互联网公共安全数据存储检索系统——PSDS。本文首先从公安领域海量数据存储和检索的现状和要求出发,分析了PSDS系统的需求;然后研究了系统的网络存储架构和数据库策略,设计了其逻辑架构和物理架构;最后基于B/S的三层结构实现和部署了PSDS系统的四个子系统——Web展现子系统、业务应用子系统、数据存储子系统和数据采集子系统。系统性能和可靠性测试结果表明,PSDS系统实现了我们的预期目标。PSDS系统的开发提高了信息利用效能:信息的实时传输和处理,保证了数据利用的时效性;系统丰富的检索能力和完备的处理能力,有效拓展了公安侦查工作的广度和深度。本文的工作成果,在公安领域具有推广应用价值。

论文目录

• 摘要
• ABSTRACT
• 第一章 绪论
• 1.1 研究背景
• 1.2 研究意义
• 1.3 研究现状分析
• 1.3.1 网络存储架构
• 1.3.2 数据库策略
• 1.3.3 应用体系架构
• 1.3.4 研究现状小结
• 1.4 本文结构
• 第二章 关键技术
• 2.1 存储区域网络技术
• 2.1.1 基本概念
• 2.1.2 SCSI 体系结构
• 2.1.3 光纤通道
• 2.1.4 光纤通道SAN 结构
• 2.1.5 基于SAN 具有冗余的服务器集群
• 2.1.6 小结
• 2.2 数据库表分区技术
• 2.2.1 基本概念
• 2.2.2 分区的分类
• 2.2.3 分区技术特性
• 2.2.4 分区技术应用
• 2.2.5 小结
• 2.3 数据库并行处理技术
• 2.3.1 基本概念
• 2.3.2 Oracle 的并行处理结构
• 2.3.3 并行处理技术的特性
• 2.3.4 RAC 环境中的并行处理
• 2.3.5 小结
• 2.4 本章小结
• 第三章 互联网公共安全数据存储检索系统的设计
• 3.1 系统逻辑架构设计
• 3.2 系统物理架构设计
• 3.3 子系统的设计
• 3.3.1 数据采集子系统的设计
• 3.3.2 数据存储子系统的设计
• 3.3.3 业务应用子系统的设计
• 3.3.4 Web 展现子系统的设计
• 3.4 本章小结
• 第四章 互联网公共安全数据存储检索系统的实现与测试
• 4.1 系统实现
• 4.1.1 数据采集子系统的实现
• 4.1.2 数据存储子系统的实现
• 4.1.3 业务应用子系统和Web 展现子系统的实现
• 4.2 系统部署
• 4.2.1 数据采集子系统的部署
• 4.2.2 数据存储子系统的部署
• 4.2.3 业务应用子系统和Web 展现子系统的部署
• 4.3 系统的性能和可靠性测试
• 4.4.1 测试环境
• 4.4.2 入库测试
• 4.4.3 查询测试
• 4.4.4 可靠性测试
• 4.4 本章小结
• 第五章 结束语
• 参考文献
• 附录
• 致谢
• 攻读硕士学位期间已发表的学术论文