多源媒体数据聚合与传输加速系统

论文摘要

随着网络技术的不断进步,视频分享技术得到了飞速发展,涌现了诸如YouTube、优酷、土豆等的一大批视频分享网站。对于一个成功的视频网站来说,有两点最为关键:一是节目丰富,二是播放要流畅。一般视频网站都只播放本站内的视频,限制了内容的丰富性。同时,由于多采用B/S结构,极大限制了服务器的承载能力及视频播放的流畅性。为了将互联网上的视频内容聚合起来,同时提高播放的质量,提出并实现了一种新的多源媒体数据聚合与传输加速系统CloudMedia。数据聚合与传输加速主要在系统以下四个模块中实现:爬虫,网站,客户端和索引服务器。爬虫和网站用来获得视频节目并展示,客户端和索引服务器在播放时提供加速。系统的聚合和加速功能是这样实现的:由爬虫获得各大视频网站播放页面的地址,分析这些播放页面,得到所播放的视频的标题、标签、介绍等属性。CloudMedia网站显示爬虫的获得的视频节目。播放时,客户端从索引服务器获得观看同一视频的其他节点,然后从这些节点和数据服务器同时下载,以提供加速。由于视频数据来自多个网站,CloudMedia系统采用不同的策略来处理多源数据的下载。在CouldMedia网站上,可以浏览到多个视频网站的内容,帮助用户聚合资源,客户端可以提供通用加速,使播放更流畅,同时为CloudMedia广告投放,用户偏好搜索,细粒度标签等后续功能打下基础。实验测试表明该系统可以提供流畅的聚合与播放服务,在P2P加速效果方面,比已有的视频网站加速器约提高了约30%。

论文目录

• 摘要
• Abstract
• 1 绪论
• 1.1 课题背景
• 1.2 研究内容
• 1.3 文章组织结构
• 2 多源媒体数据聚合与传输加速系统概述
• 2.1 目的和意义
• 2.2 概要设计
• 2.3 系统特色
• 2.4 本章小结
• 3 多源媒体数据聚合与传输加速系统详细设计
• 3.1 系统模块划分
• 3.2 视频网站爬虫模块
• 3.3 CloudMedia 网站模块
• 3.4 CloudMedia 客户端模块
• 3.5 索引服务器模块
• 3.6 本章小结
• 4 多源媒体数据聚合与传输加速系统的关键算法
• 4.1 P2P 加速功能
• 4.2 Tracker 中邻居节点的选择
• 4.3 HTTP 和P2P 协同下载的算法
• 4.4 本章小结
• 5 系统部署和测试
• 5.1 CloudMedia 部署方法
• 5.2 测试环境
• 5.3 功能测试
• 5.4 性能测试
• 5.5 本章小结
• 6 总结和展望
• 6.1 总结
• 6.2 展望
• 致谢
• 参考文献