题目内容

下列对于Scrapy数据流向描述错误的是

A. 引擎仅需要负责打开一个网站，并找到该网站的Spiders，并向该Spiders请求第一个要爬取的URL
B. 高度器返回下一个要爬取的URL给引擎，引擎将 URL通过下载器中间件（请求方向）转发给下载器（Downloader）
C. Spiders处理响应并返回爬取到的Item及(跟进的)新的请求给引擎解析中间件
D. 一旦网页下载完毕，下载器会生成一个该网页的响应，并将其通过下载器中间件（返回响应方向）发送给引擎

查看答案

搜索结果不匹配？点我反馈

更多问题

下列对于Scrapy爬虫项目目录说法错误的是

A. spiders目录用于存放用户编写的爬虫脚本
B. items脚本定义了一个Item类，能够存储爬取的数据
C. settings脚本用于设置参数
D. pipelines脚本定义了一个Pipeline类，可以根据需求将数据保存至数据库、文件等

查看答案

下列对于Scrapy的设置说法错误的是

A. Scrapy设置允许自定义所有Scrapy组件的行为，包括核心、扩展、管道和爬虫本身
B. DOWNLOAD_DELAY设置能够限制爬取的速度
C. HTTPCACHE_ENABLED设置能够启用HTTP缓存，并设置路径
DOWNLOADER_MIDDLEWARES设置能够激活用户定制的下载器中间件

查看答案

使用Scrapy命令查看Scrapy的版本

查看答案

使用Scrapy全局命令startproject，在目录:D:\课程资源-Python网络爬虫\code 下面创建名为:tspider 的Scrapy项目

查看答案