论文部分内容阅读
新浪微博是数据的重要发源地。为实现数据快速抓取,本文在研究反爬机制的基础上,设计了基于Scrapy的微博爬虫,并对各模块进行了详细阐述。实验表明,该爬虫具有支持关键字匹配、速度快、简单的特点。为研究者提供了快速、准确、方便地获取微博数据的途径。
基于Scrapy的微博爬虫设计
【摘 要】
：
新浪微博是数据的重要发源地。为实现数据快速抓取,本文在研究反爬机制的基础上,设计了基于Scrapy的微博爬虫,并对各模块进行了详细阐述。实验表明,该爬虫具有支持关键字匹配、速度快、简单的特点。为研究者提供了快速、准确、方便地获取微博数据的途径。
【机 构】
：
国防大学联合作战学院红山口校区
【出 处】
：
电子技术与软件工程
【发表日期】
：
2018年13期
其他文献
在双闭环直流调速系统教学中,为使学生能够更好地理解电机起动时转速和电流的动态过程,一般采用Matlab进行仿真实验。在仿真中,速度调节器和电流调节器都采用带饱和限幅的PI
一、混合式教学模式 混合式教学是将传统学习方式与网络学习有机结合，在提升教学理念的同时，着重分析学生需求、教学内容、教学环境的基础上，改变教师的教学模式、教学策略，充分利用在线教学和课堂教学的优势互补来提高教学实效。同时积极发挥教师引导、启发、监控教学过程的主导作用;并充分体现学生作为学习过程主体的主动性、积极性和创造性。 二、基于混合式教学模式的课程分析 基于混合式教学模式的机电一体化设备