看图,输入相关的命令
第一步.建立一个爬虫工程
输入,scrapy startproject python123demo
回车后可以看到在自己的默认路径下建立了一个目录
图1
图2
-pycache_这个文件是缓存。
第2步,在工程中产生一个爬虫
scrapy gendpider demo python123.io
parse()用于处理响应,解析内容形成字典,发现新的URL爬取请求
第三步,配置产生的spider爬虫
修改demo文件
第四步,运行爬虫
看图,输入相关的命令
第一步.建立一个爬虫工程
输入,scrapy startproject python123demo
回车后可以看到在自己的默认路径下建立了一个目录
图1
图2
-pycache_这个文件是缓存。
第2步,在工程中产生一个爬虫
scrapy gendpider demo python123.io
parse()用于处理响应,解析内容形成字典,发现新的URL爬取请求
第三步,配置产生的spider爬虫
修改demo文件
第四步,运行爬虫
相关文章: