美文网首页
[转][Python] pip安装scrapy框架

[转][Python] pip安装scrapy框架

作者: 棘刺 | 来源:发表于2019-05-09 09:41 被阅读0次

    版权声明: https://blog.csdn.net/u012314475/article/details/82725450

    一、准备(前提条件):

    1、电脑安装好了Python环境

    2、电脑上安装了pip

    3、确定电脑上安装的python环境的版本(python版本、python的位数)

    二、安装

    1、打开cmd 输入

    pip -install scrapy
    
    image.png

    2、如果出现Successfully install scrapy字样,恭喜你,说明你顺利安装成功了!

    image.png

    3、如果没有,而是像我这样不太幸运,怎么办呢?解决问题

    (1)pip版本过低

    • 由于我是不经常用python的,所以很久没有更新python相关的工具了,我这里就出现了版本过低的问题,如下图,提示如下:
      You are using pip version 10.0.0b2, however version 18.0 is available.
      You should consider upgrading via the 'python -m pip install --upgrade pip' command.
    image.png
    • 这里按照提示,运行'python -m pip install --upgrade pip更新pip版本
    image.png
    • 如上图,出现类似Successfully installed pip-18.0带有Successfully xxxx的字样即为升级成功。

    (2) Microsoft Visual C++ 14.0没有安装上

    错误提示如下:

    Microsoft Visual C++ 14.0 is required. Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools

    根据在网上查询到的结果,scrapy是依赖于 Microsoft Visual C++ 14.0编译器,提示这个错误的原因,就是电脑没有安装上编译器。怎么办呢?当然是补安装啊。怎么安装呢?这不是提示了安装方法了吗?

    Get it with "Microsoft Visual C++ Build Tools": http://landinghub.visualstudio.com/visual-cpp-build-tools

    如果你按照他的提示去做,那你就傻眼了,得安装几个g大小的C++开发工具。而且我看网上一些人的说法,似乎是安装了还得做另外的配置才能使用。

    我就在想,还有没有其他的安装方法呢?后来,忘了是在谷歌还是百度上查询到,安装Twisted包就行了

    三、Twisted

    PS:Twisted是个什么东西?an event-driven networking engine.

    1. Twisted下载地址:https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
    image.png
    1. 安装方式:

    在cmd里运行

    pip install F:\python\Twisted-18.7.0-cp36-cp36m-win_amd64.whl 
    

    这里的路径是你存放whl安装包的地方,注意修改

    如果像我这样提示:

    Twisted-18.7.0-cp36-cp36m-win_amd64.whl is not a supported wheel on this platform.

    image.png

    应该就是下载的位数版本跟python版本位数不对,重新下载对应的版本就行.

    下载正确的版本,安装,提示Successfully installed Twisted-18.7.0类似字样则说明安装成功

    image.png

    重新运行

    pip install scrapy
    

    安装scrapy ,安装成功!

    image.png
    四、总结:
    • 由于本次使用python的目的是想写个爬虫下载爬自己喜欢的一个音乐网站上的音乐,出于这样一个显得蛋疼的目的,scrapy框架安装得有点曲折,本来有点想放弃的,但是好在总是坚持下来了,尴尬,,,原谅我有点三分钟热度。

    • 总之,就是遇到问题,细心分析,多谷歌查一下,问下度娘,一般都能解决问题的。我们遇到的问题,多数别的优秀的开发前贤已经帮我们踩过坑了。感谢前贤们的无私分享,我写这篇博文,一个是为了做个笔记,同时也是为了能给遇到问题的道友一些帮助,我也希望大家,在自己有精力的前提下,多写点分享博客,利人利己。


    作者:shi5783
    来源:CSDN
    原文:https://blog.csdn.net/u012314475/article/details/82725450
    版权声明:本文为博主原创文章,转载请附上博文链接!

    相关文章

      网友评论

          本文标题:[转][Python] pip安装scrapy框架

          本文链接:https://www.haomeiwen.com/subject/gcuioqtx.html