玩爬虫几乎没有不知道scrapy框架的本文会介绍如何成功安装scrapy框架
windowns下安装scrapy
- 首先我们手动安装Twisted因为直接pip安装scrapy一般都是安装Twisted报错,索性直接安装
- https://www.lfd.uci.edu/~gohlke/pythonlibs/
- 打开这个网址Ctrl+F搜索Twisted
- 选择合适的版本,例如Twisted-20.3.0-cp38-win32.whl
- 下载后打开cmd输入:pip install
- 把Twisted-20.3.0-cp38-win32.whl拖进命令行点击回车
- 装好后开始安装scrapy
- 终端输入:pip install scrapy -i https://pypi.douban.com/simple/
- 上一步为换源,下载速度可以提升,嫌费事终端输入:pip install scrapy
- 安装完后进行测试终端输入:scrapy bench
- 如果没报错安装就成功了
linux下安装scrapy
- 直接安装
- pip instrall scrapy -i https://pypi.douban.com/simple/