大学网课搜题引擎
首页
高校帮
网络数据采集与Python爬虫【09.06初版】
第八章 构建高性能的爬虫系统
题目详情
判断题
Scrapy-redis中redis的作用是（ ）。
A
存储待爬取的urls[|]存储爬虫[|]存储序列化的结果[|]存储中间消息
查看答案与解析
判断题
使用scrapy-redis构建分布式爬虫，需要在settings.py文件中设置（ ）。
多选题
Scrapy-redis与Scrapy之间的区别在于前者可用于（ ）。
多选题
下列不属于分布式爬虫工具的有（ ）。
多选题
redis数据库用于存储list型数据的命令是（ ）。
判断题
Scrapy-redis中的调度队列可以是（ ）。
多选题
redis数据库用于查看所有key的命令是（ ）。
多选题
在Scrapy-redis的spider文件的爬虫类中，通常要设定一个redis_key,作用是（ ）。
多选题
如果不希望清空scrapy-redis的调度队列，可以设置（ ）。
网络数据采集与Python爬虫【09.06初版】
章节列表
第一章 网络数据采集概述
18
第二章 网络爬取相关的Web技术
40
第三章 web页面爬取
17
第四章 web页面内容解析
19
第五章 自动跨越身份认证
10
第六章 RIA网站数据爬取
14
第七章 构建健壮的爬虫系统
18
第八章 构建高性能的爬虫系统
9