P2P网络监管中的网络视频节目信息发现技术研究

论文摘要

P2P技术非“中心化”的特性及“对等、共享”理念实现了网络资源的合理配置,带来了P2P应用的蓬勃发展,尤其是基于P2P的网络视频业务、P2P文件分发及共享技术的发展尤为迅速,在互联网中的影响范围、用户规模及用户普及率等都处于领先地位。然而P2P技术在加速网络资源配置、扩大网络资源容量的同时,一些敌对、反动、有害、违规的网络资源也借助于P2P技术平台大肆传播,给互联网环境、网络秩序甚至国家安全都带来了严峻的挑战。如何对基于P2P技术的网络及其资源信息进行有效的监管是当前国内国际上P2P研究领域一个亟待深入探索的问题。基于P2P技术的网络系统,因其结构特性使得中心服务器的意义被大大弱化甚至完全消解,在P2P网络中分发和传输的资源难以追踪。尤其是P2P网络视频资源,其资源信息以流式数据传输,而且传输协议加密,再加上一些视频系统频繁更换域名和服务器地址、隐藏视频链接等,使得当前的技术已无法高效、实时的获取P2P网络中的视频节目信息,这种技术及实现上的难度,导致了在P2P网络监管中至今难以对网络视频节目进行有效监管,在此背景下,本文围绕着P2P网络监管中的视频节目信息发现技术展开了深入研究,并提出了有效的解决方法。首先,本文对P2P网络监管系统的总体结构和模块组成进行了说明,介绍了视频节目信息发现在整个监管系统中的地位和作用,提出了以视频发布方式为依据、从源头获取视频节目信息的基本策略。接着,对播放器模式和网页模式发布视频节目信息的特征、原理、规律等展开了深入的研究和分析,提出了通过旁路监听、数据包捕获分析及协议还原的思想来获取播放器模式发布的视频节目信息的方法;针对网页模式发布的视频节目信息,提出了以Web搜索技术为基础,进行网页遍历、HTML解析和数据过滤及抽取以获取视频节目信息的方法。解决了P2P视频节目信息发现的基本理论问题。最后,论文以所研究的视频节目信息发现方法为理论基础,设计并开发实现了具体的视频节目信息发现系统,并对系统的可用性、搜索功能以及在整个P2P网络监管中的应用和效能进行了测试。本文的研究为推动及实现P2P网络监管提供了良好的理论和实践基础。

论文目录

• 摘要
• ABSTRACT
• 第1章 绪论
• 1.1 研究背景
• 1.2 研究现状
• 1.2.1 我国P2P 网络视频现状
• 1.2.2 基于P2P 的网络视频节目信息发现技术现状
• 1.3 主要研究内容
• 1.4 论文章节安排
• 第2章 P2P 网络监管系统的总体设计
• 2.1 P2P 技术与网络监管
• 2.1.1 P2P 网络特点及应用
• 2.1.2 P2P 技术给网络监管带来的挑战
• 2.1.3 P2P 网络监管系统概述
• 2.2 系统架构设计
• 2.2.1 P2P 视频节目信息发现子系统
• 2.2.2 P2P 文件共享节点发现子系统
• 2.2.3 P2P 监管控制子系统
• 2.3 本章小结
• 第3章 P2P 视频节目信息发现技术
• 3.1 视频节目信息概述
• 3.1.1 视频节目信息的构成及描述
• 3.1.2 视频节目信息的发布方式
• 3.2 播放器模式的视频节目信息发现技术
• 3.2.1 播放器模式及特点
• 3.2.2 播放器模式中视频节目信息定位
• 3.2.3 播放器模式下的视频节目信息发现过程
• 3.2.3.1 通信流程分析
• 3.2.3.2 捕获网络数据包
• 3.2.3.3 过滤网络数据包
• 3.2.3.4 协议分析及还原
• 3.2.3.5 视频信息文件的下载及解析
• 3.2.3.6 解析文件获取视频节目信息
• 3.3 网页模式的视频节目信息发现技术
• 3.3.1 网页模式及特点
• 3.3.2 网页中的流媒体资源展现形式
• 3.3.3 网页中视频节目信息的获取过程
• 3.3.3.1 访问Web 网页
• 3.3.3.2 网站结构分析
• 3.3.3.3 网页遍历
• 3.3.3.4 HTML 文件解析
• 3.3.3.5 数据过滤与抽取
• 3.4 本章小结
• 第4章 P2P 视频节目信息发现子系统的实现
• 4.1 子系统整体设计
• 4.1.1 系统结构
• 4.1.2 系统执行流程
• 4.2 子系统详细设计
• 4.2.1 子系统初始化模块
• 4.2.2 播放器模式下的节目信息发现模块
• 4.2.2.1 模块结构及实现流程
• 4.2.2.2 协议还原的实现
• 4.2.2.3 视频节目信息文件的下载
• 4.2.2.4 XML 文件解析
• 4.2.3 网页模式下的节目信息发现模块
• 4.2.3.1 模块结构及流程
• 4.2.3.2 网站爬行实现网页的遍历
• 4.2.3.3 网页解析抽取流媒体信息
• 4.3 数据库设计
• 4.3.1 视频节目信息的存储
• 4.3.2 数据库的选择与设计
• 4.3.3 数据库连接池及多线程写入
• 4.4 本章小结
• 第5章 系统测试
• 5.1 测试环境
• 5.1.1 网络环境
• 5.1.2 软硬件配置
• 5.2 测试报告
• 5.2.1 网络视频节目信息搜索
• 5.2.1.1 初始化文件设置
• 5.2.1.2 视频节目信息搜索结果
• 5.2.2 视频节目源的采集入库
• 5.2.3 视频节目信息发现在监管系统中的应用.
• 5.3 本章小结
• 结论
• 参考文献
• 攻读硕士学位期间取得的研究成果
• 致谢