12
2019
06

Scrapy环境搭建

  1. 安装scrapy

    pip install scrapy   自动安装所需依赖包. 但 Twisted可能会安装失败

  2. 安装 Twisted

    登录 http://www.lfd.uci.edu/~gohlke/pythonlibs 下载对应版本Twisted 

        https://download.lfd.uci.edu/pythonlibs/t4jqbe6o/Twisted-19.2.1-cp37-cp37m-win_amd64.whl

        https://download.lfd.uci.edu/pythonlibs/t4jqbe6o/Twisted-19.2.1-cp38-cp38m-win_amd64.whl

        下载后 运行  pip install .\Twisted-19.2.1-cp37-cp37m-win_amd64.whl

        安装成功后 再次执行 pip install scrapy ,即可成功安装Scrapy

    3.安装成功后可以通过执行命令  python -m pydoc -p 8899 ,在浏览器中打开 http://localhost:8899/ 查看帮助文档 ,Scrapy 文档 位于 lib\site-packages

    4.使用 :  运行  scrapy startproject mspiderName  可以创建一个 名称为 mspiderName 的项目 

« 上一篇下一篇 »

豫ICP备13016324号

mdeveloper