scrapy是什么?:     

      scrapy是为了爬取网站数据的应用框架,当你需要从网站上回去信息,但该网站没有提供apl(应用程序接口,他是提供给用户来编程的)或者通过程序获取信息的机制时,scrapy可以帮助你。scrapy不仅包含了爬虫的特性,还可以将爬虫数据保存到CSV,json等文件中。

serapy的安装:

按下window键搜索anaconda输入:conda install scrapy    如图:

python 爬虫框架scrapy的安装以及基本操作

 python 爬虫框架scrapy的安装以及基本操作

 python 爬虫框架scrapy的安装以及基本操作

 python 爬虫框架scrapy的安装以及基本操作

 第二种安装方式在终端上输入:pip install scrapy

python 爬虫框架scrapy的安装以及基本操作

如果安装不成功就需要下载scrapy的whl包,下载地址,

根据你的python版本安装相应包,我的python版本是3.6   cp36是python3.6的意思 amd32是python位数

python 爬虫框架scrapy的安装以及基本操作

python 爬虫框架scrapy的安装以及基本操作

 python 爬虫框架scrapy的安装以及基本操作

将下载好的包拖到桌面在终端上输入以下命令:

python 爬虫框架scrapy的安装以及基本操作

 python 爬虫框架scrapy的安装以及基本操作

 python 爬虫框架scrapy的安装以及基本操作

python 爬虫框架scrapy的安装以及基本操作

 python 爬虫框架scrapy的安装以及基本操作

 以上就是scrapy的安装,安装好了就可以进行一些操作了。以下是我的例子

先在桌面创建一个文件夹,在里面再建一个文件夹,并在pycharm中打开,然后打开终端在终端里输入以下代码

python 爬虫框架scrapy的安装以及基本操作

接下来继续看图:

python 爬虫框架scrapy的安装以及基本操作

 未完待续,我要睡觉了。

相关文章:

  • 2021-05-12
  • 2021-05-03
  • 2021-05-30
  • 2021-12-12
  • 2021-11-20
  • 2021-12-29
  • 2021-04-27
猜你喜欢
  • 2021-06-24
  • 2021-12-25
  • 2021-09-19
  • 2021-04-12
  • 2022-01-09
  • 2021-06-20
  • 2021-07-03
相关资源
相似解决方案