网络爬虫开题报告doc.pdf

网络爬虫开题报告 篇一：毕设开题报告 及开题报告分析 开题报告如何写 注意点 1. 一、对指导教师下达的课题任务的学习与理解 这部分主要是阐述做本课题的重要意义 2. 二、阅读文献资料进行调研的综述 这部分就是对课题相关的研究的综述 落脚于本课题解 决了那些关键问题 3. 三、根据任务书的任务及文件调研结果，初步拟定执 行实施的方案（含具体进度计划） 这部分重点写具体实现的技术路线 方案的具体实施方 法和步骤了，具体进度计划只是附在后面的东西不是重点 南京邮电大学通达学院毕业设计 ( 论文 ) 开题报告 文献 [5] 基于信息数据分析的微博研究综述 [J] ；研 究微博信息数据的分析，在这类研究中，大多数以微博消息 传播的三大构件 微博消息、 用户、用户关系为研究对象。 以微博消息传播和微博成员组织为主要研究内容，目的在于 发祥微博中用户、消息传博、热点话题、用户关系网络等的 规律。基于微博信息数据分析的研究近年来在国内外都取得 了很多成果，掌握了微博中的大量特征。该文献从微博消息 传播三大构件的角度，对当前基于信息数据分析的微博研究 进行系统梳理 , 提出微博信息传播三大构件的概念 , 归纳了 此类研究的主要研究内容及方法。 对于大多用户提出的与主题或领域相关的查询需求 , 传 统的通用有哪些信誉好的足球投注网站引擎往往不能提供令人满意的结果网页。为了 克服通用有哪些信誉好的足球投注网站引擎的以上不足 , 提出了面向主题的聚焦爬虫 的研究。文献 [6] 综述了聚焦爬虫技术的研究。其中介绍并 分析了聚焦爬虫中的关键技术：抓取目标定义与描述，网页 分析算法和网页分析策略， 并根据网络拓扑、 网页数据内容、 用户行为等方面将各种网页分析算法做了分类和比较。聚焦 爬虫能够克服通用爬虫的不足之处。 文献 [7] 首先介绍了网络爬虫工作原理 , 传统网络爬虫 的实现过程 , 并对网络爬虫中使用的关键技术进行了研究 , 包括网页有哪些信誉好的足球投注网站策略、 URL 去重算法、网页分析技术、更新策 略等。然后针对微博的特点和 Ajax 技术的实现方法 , 指出传 统网络爬虫的不足 , 以及信息抓取的技术难点 , 深入分析了 现有的基于 Ajax 的网络爬虫的必威体育精装版技术——通过模拟浏览 器行为 , 触发 JavaScript 事件 ( 如 click, onmouseover 等 ), 解析 JavaScript 脚本 , 动态更新网页 DOM树 , 抽取网页中的 有效信息。最后 , 详细论述了面向 SNS 网络爬虫系统的设计 方案 , 整( 转载自： www.xiaocaOfaNW 小草 范 文 网: 网络爬虫开题报告 ) 体构架 , 以及各功能模块的具体实现。 面向微博的网络爬虫系统的实现是以新浪微博作为抓取的 目标网站。结合新浪微博网页的特点 , 通过模拟用户行为 , 解 析 JavaScript